Mapreduce框架-reduceTask工作原理

ReduceTask的工作原理 1.reduceTask獲取map階段的輸出-copy階段 兩點說明： （1）map任務和reduce任務不一定在同一臺機器上。 （2）map任務和reduce任務不是隻有一個。可能有多個map任務和多個reduce任務同時執行。 1.reduce需要通過內部通信將map任務的輸出拷貝到reduce。 2.需要將所有的map任務的輸出拷貝到不同的reduce。一個r

>>阅读原文<<