MR程序在yarn上的運行基本流程

1:客戶端提交job到resourceManger 2:resourceManger創建job任務 返回工作路徑給客戶端 3:客戶端接收到工作路徑後會在HDFS上創建工作目錄,初始化job 創建工作目錄: 1讀取默認的配置 自定義配置(conf.xml) 2計算要處理的數據(計算任務切片) 3上傳jar包 4:客戶端向resourceManger請求創建任務的容器(1core,1.5G) 5:re

>>阅读原文<<