【3.3】MapReduce工作流程

1. MapTask 工作機制 Spill溢寫階段: 2. ReduceTask 工作機制 ReduceTask工作機制 設置 ReduceTask 並行度(個數) ReduceTask 的並行度同樣影響整個Job 的執行併發度和執行效率,但與MapTask 的併發數由切片數決定不同,ReduceTask 數量的決定是可以在驅動類中直接手動設置: 實驗:測試ReduceTask多少合適 注意事項
相關文章
相關標籤/搜索