hadoop 的 map reduce實現(其一)

一,map 階段:    1,切片是由輸入格式化類來實現的,默認切片大小等於block size 2,一個切片(邏輯概念,一個map處理數據的大小)對應一個map, 所有的 map 執行完之後才執行 reduce 3,默認的情況下 一個 block對應一個map程序,也可以使用窗口機制(切片) 使得一個 block(很多的 cpu 密集型) 很多 map 4,每個切片以 記
相關文章
相關標籤/搜索