Spark任務提交底層原理

                                      Spark運行機制 1.驅動器(driver)應用程序的入口,執行用戶編寫的用來創建的SparkContext,創建RDD以及RDD之間的轉換操作的代碼(觸發action) 2.RDD的創建和RDD之間的轉換就是有向無環圖(DAG),將有向無環圖發送給DAGScheduler 3.DAGScheduler通過血統(款依賴,
相關文章
相關標籤/搜索