Hadoop自適應(yīng)任務(wù)調(diào)度算法
大?。?/span>0.76 MB 人氣： 2017-12-20 需要積分：1
標(biāo)簽：任務(wù)調(diào)度(9843)Hadoop(15870)
針對異構(gòu)集群任務(wù)推測式執(zhí)行算法存在的任務(wù)進度比例固定、落后任務(wù)被動選取等問題，提出基于快慢節(jié)點集計算能力差異的自適應(yīng)任務(wù)調(diào)度算法。該算法量化節(jié)點集計算能力差異實現(xiàn)分集調(diào)度，并通過節(jié)點與任務(wù)速率的動態(tài)反饋及時更新快慢節(jié)點集，提高節(jié)點集資源利用率與任務(wù)并行度。在兩節(jié)點集中，利用動態(tài)調(diào)整任務(wù)進度比例判別落后任務(wù)，主動選擇采用替代執(zhí)行方式為落后任務(wù)執(zhí)行備份任務(wù)的快節(jié)點，從而提升任務(wù)執(zhí)行效率。與最長近似結(jié)束時間（ LATE）算法的實驗對比結(jié)果表明，該算法在短作業(yè)集、混合型作業(yè)集、出現(xiàn)節(jié)點性能下降的混合型作業(yè)集執(zhí)行時間上比LATE算法分別縮短了5.2l%、20. 51%、23. 86%，啟用的備份任務(wù)數(shù)比LATE算法明顯減少。所提算法可使任務(wù)主動適應(yīng)節(jié)點差異，在減少備份任務(wù)的同時有效提高作業(yè)整體執(zhí)行效率。
非常好我支持^.^
(0) 0%
不好我反對
(0) 0%
下載地址
Hadoop自適應(yīng)任務(wù)調(diào)度算法下載
相關(guān)電子資料下載
- 鴻蒙開發(fā)接口資源調(diào)度：【@ohos.workScheduler (延遲任務(wù)調(diào)度)】 592
- 淺析FreeRTOS任務(wù)調(diào)度器的三種調(diào)度算法和應(yīng)用 1839
- FreeRTOS任務(wù)調(diào)度器的三種調(diào)度算法講解（下） 979
- FreeRTOS任務(wù)調(diào)度器的三種調(diào)度算法講解（上） 832
- Hadoop是什么?其核心由兩大部分組成,分別是什么? 1188
- 鴻蒙開發(fā)【分布式任務(wù)調(diào)度】解析 466
- 鴻蒙OS 分布式任務(wù)調(diào)度 303
- 任務(wù)調(diào)度系統(tǒng)設(shè)計的核心邏輯 448
- 基于FreeRTOS的STM32F103系統(tǒng)—內(nèi)存管理及任務(wù)調(diào)度 878
- workflow異步任務(wù)調(diào)度編程范式 295