Hadoop ——mapreduce——partitioner 理解

partitioner是在mapreduce的map過程之後,將mapper輸出文件分成幾個文件,再交由reducer處理。 之前老以爲是在reducer階段進行的partitioner,所以導致自己寫了分區類,有了不同的文件輸出,但是輸出文件中的其中一個文件什麼都沒有。   code: import org.apache.hadoop.io.IntWritable; import org.apa
相關文章
相關標籤/搜索