MR流程總結

maptask的數量由客戶機的切片信息決定的 一、在我們提交完MR程序之後,MR程序會先後經歷map,reduce階段,下面我們詳細的來解析一下各個階段: 1、map階段,在這個階段主要分如下的幾個步驟read,map,collect,溢寫,combine階段 (1)、在read階段,maptask會調用用戶自定義的RecordReader方法,在splitInput中解析出一個個的key-val
相關文章
相關標籤/搜索