Mapreduce和Yarn概念,參數優化,作用,原理,MapReduce計數器 Counter,MapReduce 多job串聯之ControlledJob(來自學習資料)

3.3. MapReduce與YARN 3.3.1 YARN概述 Yarn是一個資源調度平臺,負責爲運算程序提供服務器運算資源,相當於一個分佈式的操作系統平臺,而mapreduce等運算程序則相當於運行於操作系統之上的應用程序 3.3.2 YARN的重要概念 1、  yarn並不清楚用戶提交的程序的運行機制 2、  yarn只提供運算資源的調度(用戶程序向yarn申請資源,yarn就負責分配資源)
相關文章
相關標籤/搜索