Shuffle的過程作用詳解

shuffle shuffle過程中的幾個名詞：shuffle：洗牌；spill：溢出；combiner：合成；merge：融入混合；copy:複製 shuffle的使用地點：發生在map task輸出結果傳送到reduce task 輸入的階段 使用shuffle的好處：在從map task端拉取數據到reduce task端時，減少寬帶的消耗， 將數據完整的從map task端拉取數據到red

>>阅读原文<<