MapReduce任務參數調優

conf.set("mapreduce.job.reduce.slowstart.completedmaps", "0.8"); 【在往hbase表裏通過bulkload導數據時，某個mapreduce跑了一個多小時還沒跑，看yarn界面，發現map還有一小部分沒跑完，沒跑完的map全在pending，running中沒有，同時reduce在copy階段把資源全用光，導致map沒資源去跑，進而導致

>>阅读原文<<