YARN原理及其工作流程

一 YARN組成元素及其功能 RM:YARN的管理者 NM:YARN的執行者 二 YARN工作原理 首先數據上傳到集羣中.然後將寫好的程序打成架包通過命令提交MR作業.提交到集羣后由集羣管理者MR開始調度分配資源.到HDFS讀取數據執行MapReduce相關進程對數據進行計算 三 具體流程 第一步: Client執行main()函數中runjob();開啓作業 第二步:client向RM發送作業請

>>阅读原文<<