spark的工作流程

1.通過"spark-submit"腳本將代碼提交到集羣中運行。 2.在初始化sparkContext上下文時,spark會創建"DAGScheduler""TeskScheduler"兩個對象。 3.創建好這兩個對象後,客戶端(Driver)會向Master節點發送一個Application任務。 4.Master在接受到Application任務後,會進行資源調度。 5.Master會找到對應
相關文章
相關標籤/搜索