MapReduce 過程

Map 從磁盤上讀取數據 執行map函數 Partition分區(放進內存) Sort排序(內存排序) Combine結果(內存預聚合) 將結果寫到本地的磁盤上 Merge(對磁盤上的文件合併) Reduce Copy (fetch 拉取數據直接放進內存) Merge (內存->磁盤) Merge (磁盤->磁盤) 執行reduce函數 word count 例子 假如有一個文件，被切分成兩個sp

>>阅读原文<<