一個例子讓你瞭解MapReduce中shuffle的過程

Shuffle 目錄   一 .Shuffle基本概念   二 .MapReduce 過程爲什麼需要shuffle過程呢?   三 .Combiner     1 Combiner對系統的優化   四 .Partitioner     1 用數據分區解決數據相關性問題     2 Partitioner主要作用   五 .Shuffle過程的期望   六 .Sort   七 .Merge     
相關文章
相關標籤/搜索