最新的毛片基地免费,国产国语一级毛片,免费国产成人高清在线电影,中天堂国产日韩欧美,中国国产aa一级毛片,国产va欧美va在线观看,成人不卡在线

一種分布式批量數(shù)據(jù)處理方法、裝置及存儲介質(zhì)與流程

文檔序號:41959059發(fā)布日期:2025-05-20 16:53閱讀:來源:國知局

技術(shù)特征:

1.一種分布式批量數(shù)據(jù)處理方法,其特征在于,包括:

2.根據(jù)權(quán)利要求1所述的方法,其特征在于,根據(jù)目標(biāo)業(yè)務(wù)場景的業(yè)務(wù)數(shù)據(jù)處理需求,配置所述目標(biāo)業(yè)務(wù)場景待處理的大批量數(shù)據(jù)的定時任務(wù)清單包括:

3.根據(jù)權(quán)利要求1所述的方法,其特征在于,根據(jù)所述目標(biāo)業(yè)務(wù)場景的業(yè)務(wù)處理邏輯和所述定時任務(wù)清單,生成任一所述定時任務(wù)的定時任務(wù)實例清單包括:

4.根據(jù)權(quán)利要求1所述的方法,其特征在于,根據(jù)所述定時任務(wù)實例清單部署任務(wù)執(zhí)行集群包括:

5.根據(jù)權(quán)利要求1所述的方法,其特征在于,根據(jù)所述定時任務(wù)清單和所述任務(wù)執(zhí)行集群,生成定時任務(wù)配置信息包括:

6.根據(jù)權(quán)利要求1-5任一項所述的方法,其特征在于,根據(jù)所述定時任務(wù)實例參數(shù),利用所述任務(wù)執(zhí)行集群采取取模運算規(guī)則分批處理所述大批量數(shù)據(jù)包括:

7.根據(jù)權(quán)利要求6所述的方法,其特征在于,匯總各個處理結(jié)果再存入數(shù)據(jù)庫中包括:

8.一種分布式批量數(shù)據(jù)處理裝置,其特征在于,包括:

9.一種計算機裝置,其特征在于,包括:存儲器和處理器,所述存儲器中存儲指令,所述指令由處理器加載并執(zhí)行,以實現(xiàn)如權(quán)利要求1-7任一項所述的方法。

10.一種計算機可讀存儲介質(zhì),其特征在于,所述計算機可讀存儲介質(zhì)內(nèi)存儲有計算機程序,當(dāng)所述計算機程序在計算機上運行時,實現(xiàn)如權(quán)利要求1-7任一項所述的方法。


技術(shù)總結(jié)
本申請?zhí)岢隽艘环N分布式批量數(shù)據(jù)處理方法、裝置及存儲介質(zhì),可以有效提升數(shù)據(jù)處理的效率以及保證數(shù)據(jù)處理的穩(wěn)定性,該方法包括:根據(jù)目標(biāo)業(yè)務(wù)場景的業(yè)務(wù)數(shù)據(jù)處理需求,配置目標(biāo)業(yè)務(wù)場景待處理的大批量數(shù)據(jù)的定時任務(wù)清單;根據(jù)目標(biāo)業(yè)務(wù)場景的業(yè)務(wù)處理邏輯和定時任務(wù)清單,生成任一定時任務(wù)的定時任務(wù)實例清單;根據(jù)定時任務(wù)實例清單部署任務(wù)執(zhí)行集群;根據(jù)定時任務(wù)清單和任務(wù)執(zhí)行集群,生成定時任務(wù)配置信息;根據(jù)定時任務(wù)配置信息,按照定時任務(wù)標(biāo)簽,將任一定時任務(wù)實例分配給任務(wù)執(zhí)行集群中的相應(yīng)執(zhí)行器;根據(jù)定時任務(wù)實例參數(shù),利用任務(wù)執(zhí)行集群采取取模運算規(guī)則分批處理大批量數(shù)據(jù),并匯總各個處理結(jié)果再存入數(shù)據(jù)庫中。

技術(shù)研發(fā)人員:王燦,莫海斌,湯秋明,周常文
受保護的技術(shù)使用者:廣東億迅科技有限公司
技術(shù)研發(fā)日:
技術(shù)公布日:2025/5/19
當(dāng)前第2頁1 2 
網(wǎng)友詢問留言 已有0條留言
  • 還沒有人留言評論。精彩留言會獲得點贊!
1