Map端的聚合操作Combiner

需求 詞頻統計,假設有一個文件,統計這個文件詞頻 常見的解決辦法 例如原始文本是: 交給兩個Map去處理,map1處理hello is hello is,map2處理hadoop is hadoop is hadoop,輸出結果map1爲:(hello,1)(is, 1)(hello, 1)(is, 1),map2爲(hadoop,1)(is, 1)(hadoop, 1)(is, 1)(hadoo
相關文章
相關標籤/搜索