MapReduce之Combiner合併

Combiner是MR程序中Mapper和Reducer之外的一種組件(本質是一個Reducer類) Combinr組件的父類就是Reducer Conbimer只有在驅動類裏設置了之後，纔會運行 Combiner和Reducer的區別在於運行的位置： map----sort—copy—sort(shuffle階段)—reduce ==Combiner是在每一個MapTask所在的節點運行 Red

>>阅读原文<<