學習筆記_MapReduce與Shuffle

MapReduce運行詳解 MapReduce是Hadoop中的分佈式離線並行計算框架，主要負責批量處理數據，這裏將對MapReduce的運行過程進行解釋 MapReduce在運行任務時會產生Map Task和Reduce Task兩個進程，可分爲Map、Shuffle和Reduce三個階段 Map 每個map接收傳來的一個split，格式爲< key，value >，其中key爲LongWrit

>>阅读原文<<