MR總結

並行度 maptask並行度 切片機制 1)切片定義在InputFormat類中的getSplit()方法 maxsize、blocksize、minsize 2)FileInputFormat中默認的切片機制: 128m切,當一個文件的最後一個切片最大可以切成122m*1.1大小 併發數影響因素 運行節點的硬件 運行任務的類型:CPU密集/IO密集 運行人物的數據量 reducetask並行度
相關文章
相關標籤/搜索