spark代碼提交流程(Standalone)

spark-submit提交代碼 執行new SparkContext(),在SparkContext裏構造DAGScheduler和TaskScheduler. TaskScheduler會通過後臺的一個進程,連接Master,向Master註冊Application。 Master接收到Application請求後,會使用相應的資源調度算法,在Worker上爲這個Application啓動多個
相關文章
相關標籤/搜索