MapReduce筆記

一、mapreduce框架原理 1、 mapreduce按照task分，分爲maptask和reducetask 2、 mapreduce按流程劃分分爲inputformat，map，shuffle，reducer，outputformat 二、shuffle流程 1、 map()將<k,v>寫入環形緩衝區，並且，在寫入環形緩衝區之前，這個<k,v>已經知道了它在哪個分區，但是在環形緩衝區中，<k

>>阅读原文<<