Mapreduce框架-reduceTask工做原理

ReduceTask的工做原理 1.reduceTask獲取map階段的輸出-copy階段 兩點說明： （1）map任務和reduce任務不必定在同一臺機器上。 （2）map任務和reduce任務不是隻有一個。可能有多個map任務和多個reduce任務同時執行。程序員 1.reduce須要經過內部通訊將map任務的輸出拷貝到reduce。 2.須要將全部的map任務的輸出拷貝到不一樣的reduce

>>阅读原文<<