spark的核心概念

名詞解釋 1.ClusterManager:在standalone模式中是Master(主節點),控制整個集羣,監控Worker。在YARN模式下是資源管理器。 注意:spark是存儲在內存中,不需要管理存儲,無論是Master,還是resourcemanager資源管理器,主要都是管理資源的(cpu,內存)。 2.Worker:從節點,負責控制計算節點,啓動Executor。在YARN模式中爲N
相關文章
相關標籤/搜索