MapReduce過程圖解

1. 一個mr程序啓動的時候,最先啓動的是MRAppMaster,MRAppMaster啓動後根據本次job的描述信息,計算出需要的maptask實例數量,然後向集羣申請機器啓動相應數量的maptask進程 2.maptask進程啓動之後,根據給定的數據切片範圍進行數據處理,主體流程爲: a) 利用客戶指定的inputformat來獲取RecordReader讀取數據,形成輸入KV對 b) 將輸入
相關文章
相關標籤/搜索