spark 組成及運行大概 流程

spark 組成及運行大概  流程  Driver:運行應用的的main函數,提交任務,下發計算任務。 ClusterManager:資源管理,在獨立的模式(standalone)模式下是master ,在yarn是ResouceManager Work:計算工作節點,上報自己的資源情況,啓動和管理Executer Executor:執行器,是某個應用運行在work節點上的一個進程,負責執行tas
相關文章
相關標籤/搜索