看圖說mapreduce的shuffle機制

看圖說shuffle過程： 　　mapreduce中，map階段處理的數據如何傳遞給reduce階段，是mapreduce框架中最關鍵的一個流程，這個流程就叫shuffle 1、shuffle是MR處理流程中的一個過程，它的每一個處理步驟是分散在各個map task和reduce task節點上完成的，整體來看，分爲3個操作： partition分區（shuffle必要操作）。 sort排序，根據

>>阅读原文<<