大數據教程Combiner合併案例實操

Combiner合併案例實操 1.需求 統計過程中對每一個MapTask的輸出進行局部彙總,以減小網絡傳輸量即採用Combiner功能。 (1)數據輸入 (2)期望輸出數據 期望:Combine輸入數據多,輸出時經過合併,輸出數據降低。 2.需求分析     圖4-15 Combiner的合併案例 3.案例實操-方案一 1)增加一個WordcountCombiner類繼承Reducer packa
相關文章
相關標籤/搜索