首页 诗词 字典 板报 句子 名言 友答 励志 学校 网站地图
当前位置: 首页 > 教程频道 > 其他教程 > 互联网 >

hadoop job推测施行

2013-04-09 
hadoop job推测执行//SPECULATIVE_GAP 0.2(averageProgress - progress SPECULATIVE_GAP ) && (curren

hadoop job推测执行
//SPECULATIVE_GAP =0.2(averageProgress - progress >= SPECULATIVE_GAP ) && (currentTime - startTime >= SPECULATIVE_LAG?P.s. 看源码的时候看到调度map task的策略,故记下。JobInProgress添加新的maptask的调度策略// When scheduling a map task://? 0) Schedule a failed task without considering locality//? 1) Schedule non-running tasks//? 2) Schedule speculative tasks//? 3) Schedule tasks with no location informationmap task调度策略:1、失败的task,不考虑地点2、没跑过的task3、推测执行的task4、nonLocalRunningMaps中的task??

?

热点排行