spark的執行流程

spark的執行流程: spark的集羣 : master: 1/管理集羣,start-all.sh,啓動集羣,讓worker去master 發心跳,上報本身狀態,告訴master本身有多少資源(cpu,內存) 2/接受driver的註冊。你的程application運行以後,會在driver端,向master進行註冊。 3/資源調度,spark程序能夠同時的運行不少個application,每一
相關文章
相關標籤/搜索