大數據6-Maptask並行度有關

1.FileInoutFormat切片機制: 2.總結:     1.切片是爲了給maptask分配任務,也就是爲了整個mapreduce程序做map的並行度規劃;     2.一個切片會交給一個maptsak來處置;     3.默認的切片機制是FileInputFormat getSplits(),他的邏輯是對輸入目錄中所有的文件挨個進行切片,切片的參數splitSize == block.s
相關文章
相關標籤/搜索