MapReduce 運行原理---再聊MapReduce 的 Map ，Reduce 以及shuffle 過程

官網使用了三張圖來描述shuffle 過程 ，Map 和 reduce 是我們自己寫的程序，所以沒有寫進這三個圖裏面,今天主要圍繞這三張圖我們做一個簡單的說明和複習 ： 第一張圖，從整體上把握流程 上圖提供的是整個流程的一部分，全部流程應該是有 4 個  Map  ，3 個 Reduce ，這裏只有一個map 一個  reduce 第一個問題 ： partition 什麼時候做 ？ partiti

>>阅读原文<<