MapReduce框架-combiner

Combiner 1.對combiner的理解 combiner其實屬於優化方案，因爲帶寬限制，應該儘可能map和reduce之間的數據傳輸數量。它在Map端把同一個key的鍵值對合並在一塊兒並計算，計算規則與reduce一致，因此combiner也能夠看做特殊的Reducer。 執行combiner操做要求開發者必須在程序中設置了combiner(程序中經過job.setCombinerClas

>>阅读原文<<