MapReduce程序運行流程詳解

一、MapReduce整體運行流程 流程示意圖如下: (1)在MapReduce程序讀取文件的輸入目錄上存放相應的文件。 (2)客戶端程序在submit()方法執行前,獲取待處理的數據信息,然後根據集羣中參數的配置形成一個任務分配規劃。 (3)客戶端提交job.split、jar包、job.xml等文件給yarn,yarn中的resourcemanager啓動MRAppMaster。 (4)MRA
相關文章
相關標籤/搜索