MapReduce 程序內部數據處理流程全解析

主要分爲以下幾個階段： 1. 輸入分片（input split）： InputFormat有兩個任務：對源文件分片，確定Mapper數量；對分片進行格式化，處理成<key,value>形式的數據給Mapper 在進行map計算之前，mapreduce會根據輸入文件計算輸入分片（input split），每個輸入分片（input split）針對一個map任務，輸入分片（input split）存儲

>>阅读原文<<