Spark調度系統——概述

簡單來講,Spark調度系統用於將用戶提交的「任務」調度到集羣中的不同節點執行。但是Spark實現的調度系統,並非一句話所概括的這麼簡單。Spark資源調度分爲兩層:第一層是Cluster Manager(在YARN模式下爲ResourceManager,在Mesos模式下爲Mesos Master,在Standalone模式下爲Master),將資源分配給Application;第二層是Appl
相關文章
相關標籤/搜索