Combiners

Combiners 怎麼理解combiners? 1、每一個map可能會產生大量的輸出，combiner的作用就是在map端對輸出先做一次合併，以減少傳輸到reducer的數據量。 2、combiner最基本是實現本地key的歸併，combiner具有類似本地的reduce功能。 3、如果不用combiner，那麼，所有的結果都是reduce完成，效率會相對低下。使用combiner，先完成的ma

>>阅读原文<<