Spark源碼解讀之Shuffle計算引擎剖析

Shuffle是Spark計算引擎的關鍵所在，是必須經歷的一個階段，在前面的文章中，咱們剖析了Shuffle的原理以及Map階段結果的輸出與Reduce階段結果如何讀取。該篇文章是對前面兩篇文章 【Spark源碼解讀之Shuffle原理剖析與源碼分析】 【Spark存儲機制源碼剖析】 細節的深刻探究。web 瞭解Shuffle原理的讀者都知道，整個Shuffle過程被劃分爲map和reduce階段

>>阅读原文<<