Hadoop之MapReduce工作流程

Hadoop之MapReduce工作流程 目錄 流程示意圖 流程詳解 注意 1. 流程示意圖 MapReduce工作流程 流程示意圖，如下圖 2. 流程詳解 上面的流程是整個mapreduce最全工作流程，但是shuffle過程只是從第7步開始到第16步結束，具體shuffle過程詳解，如下： maptask收集我們的map()方法輸出的kv對，放到內存緩衝區中 從內存緩衝區不斷溢出本地磁盤文件，

>>阅读原文<<