合肥金星智控科技股份有限公司
宣傳

位置:中冶有色 >

有色技術頻道 >

> 化學分析技術

> 基于強化學習的異構MapReduce集群推測執行調度方法

基于強化學習的異構MapReduce集群推測執行調度方法

1169   編輯:管理員   來源:中冶有色網  
2023-03-19 06:49:12
本發明涉及一種基于強化學習的異構MapReduce集群推測執行調度方法,屬于大數據處理領域。本發明采用基于Q?learning強化學習的節點權重動態更新方法,基于歷史信息實現節點權重的自適應調整,有效提升了task剩余運行時間的估算準確性;對straggler進行是否遷移的判別,需同時滿足備份task比例約束,以及遷移后的運行時間約束兩項條件,straggler才能啟動備份任務;同時結合map task快節點和reduce task快節點,這種方式提升了異構MapReduce集群的資源利用率?;诘湫蛿祿姆抡嬖囼灲Y果表明,相比于現有算法,本文提出的算法對于大規模數據的處理效率明顯提升。
登錄解鎖全文
聲明:
“基于強化學習的異構MapReduce集群推測執行調度方法” 該技術專利(論文)所有權利歸屬于技術(論文)所有人。僅供學習研究,如用于商業用途,請聯系該技術所有人。
我是此專利(論文)的發明人(作者)
分享 0
         
舉報 0
收藏 0
反對 0
點贊 0
標簽:
化學分析
全國熱門有色金屬技術推薦
展開更多 +

 

中冶有色技術平臺

最新更新技術

報名參會
更多+

報告下載

赤泥綜合利用研究報告2025
推廣

熱門技術
更多+

衡水宏運壓濾機有限公司
宣傳
環磨科技控股(集團)有限公司
宣傳

發布

在線客服

公眾號

電話

頂部
咨詢電話:
010-88793500-807
專利人/作者信息登記
在线精品视频播放|无码 有码 国产18p|宅男精品一区在线观看|伊人色综合久久天天人手人婷|亚洲熟肥妇女BBXX