基於standalone的Spark架構與工作原理理解

standalone模式下的模塊架構 Client 客戶端進程,負責提交作業到Maste Client就是我們的客戶端,例如我們在windows上通過eclipse編寫Scala程序向Spark提交作業,那麼我們的Client就是eclipse Master Standalone模式中主節點,負責接收Client提交的作業,管理Worker,並命令Worker啓動Driver和Executor。
相關文章
相關標籤/搜索