大數據技術 - MapReduce的Shuffle及調優

大數據技術 - MapReduce的Shuffle及調優 http://www.javashuo.com/article/p-cbpyxgln-kb.html 本章內容我們學習一下 MapReduce 中的 Shuffle 過程，Shuffle 發生在 map 輸出到 reduce 輸入的過程，它的中文解釋是 「洗牌」，顧名思義該過程涉及數據的重新分配，主要分爲兩部分：1. map 任務輸出的數據

>>阅读原文<<