[Hadoop]MapReduce中的Partitioner與Combiner

Partitioners負責劃分Maper輸出的中間鍵值對的key,分配中間鍵值對到不同的Reducer。Maper輸出的中間結果交給指定的Partitioner,確保中間結果分發到指定的Reduce任務。在每個Reducer中,鍵按排序順序處理(Within each reducer, keys are processed in sorted order)。Combiners是MapReduce
相關文章
相關標籤/搜索