大數據處理 — 淺析MapReduce之shuffle

淺析MapReduce -> shuffle shuffle的意思就是洗牌，它是MapReduce的核心，也是被稱爲奇蹟發生的地方，因爲MapReduce玩的就是洗數據，然後讓數據出現在該出現的位置. 官方描述的shuffle過程，我們不太可能明白shuffle的過程，因爲它與事實相差挺多的，細節也是錯亂的. 我們現在這樣理解就可以了， shuffle 描述着數據從map task輸出到reduc

>>阅读原文<<