MapReduce的執行流程

一個MapReduce的做業執行流程是:1)代碼編寫;2)做業配置;3)做業提交;4)Map任務的分配和執行;4)處理中間結果;5)Reduce任務的分配與執行;6)做業完成。具體如圖1-1所示。下面以一個簡單的單詞計數例子對各個步驟作一個詳細的介紹。 java 1代碼編寫及配置 代碼編寫及配置主要是在客戶端進行。web 1)代碼編寫主要是編寫咱們須要的map函數和Reduce函數。bash ma
相關文章
相關標籤/搜索