Spark on Yarn 解惑

一:Hadoop Yarn解析          1,Yarn是Hadoop推出整個分佈式(大數據)集羣的資源管理器,負責資源的管理和分配,基於Yarn我們可以在同一個大數據集羣上同時運行多個計算框架,例如Spark、MapReduce、Storm等;          2,Yarn基本工作流程如下圖所示:          注意:Container要向NodeManager彙報資源信息,Cont
相關文章
相關標籤/搜索