Spark學習(四)資源調度與任務調度的整合

文章目錄 1、資源調度 2、任務調度 3、資源調度與任務調度整合 4、粗細粒度資源調度 一、什麼是粗粒度資源調度？ 二、什麼是細粒度資源調度？ 1、資源調度 一、待集羣Spark集羣啓動成功後，Woker與Master通訊，此時Worker的各類信息(IP、port等)會存在Master中的wokers集合中，其數據類型是HashSet。此時Master會爲各個Worker分配資源。web 二、當

>>阅读原文<<