基於YARN的mapreduce作業執行流程詳解

相對於MapReduce1系統,YARN將jobtracker的職能劃分爲多個獨立個體,從而改善經典MapReduce在擴展時面臨的瓶頸。 標基於YARN的mapreduce作業執行流程題 YARN中的實體: 1. 客戶端:提交MapReduce作業; 2. 資源管理器:協調集羣上計算資源的分配。 3. 節點管理器:負責啓動和監視集羣中機器上的計算容器(container)。 4. 應用管理器(M
相關文章
相關標籤/搜索