Spark Shuffle之Hash Shuffle

概述 Hash Shuffle是Spark 1.2之前的默認Shuffle實現，並在Spark 2.0版本中被移除，因此，瞭解Hash Shuffle的意義更多的在於和Sort Shuffle對比，以及理解爲什麼Sort Shuffle能夠完全取代Hash Shuffle。 實現 Shuffle 過程這篇文章介紹了Hash Shuffle的實現及優化過程，特別是下面這幅圖很好的描述了整個流程 Sh

>>阅读原文<<