spark學習之spark基本架構和運行模式(初初級)

一 spark的基本架構 Cluster Manager:用來管理資源,隨着資源管理者身份的不同而改變,在standalone 模式中即爲Master主節點,控制整個集羣,監控worker。在YARN模式中爲資源管理器 Worker節點:從節點,負責控制計算節點,啓動Executor或者Driver。 Driver: 程序入口,負責申請資源和後續整個application執行的管理 Executo
相關文章
相關標籤/搜索