Shuffle原理剖析與源碼分析

文章轉自：http://blog.csdn.net/github_36444580/article/details/78637355 對比Spark與MR中的shuffle 1.Shuffle是MapReduce框架中的一個特定的phase（時期），介於Map phase和Reduce phase之間，當Map的輸出結果要被Reduce使用時，輸出結果需要按key哈希，並且分發到每一個Reduce

>>阅读原文<<