Spark內核架構深度剖析

1,通過spark-submit提交編寫好的Spark程序,這時候spark會通過反射的方式,創建和構造一個DriverActor進程出來。 2,Driver進程會執行我們的Application應用程序,在代碼中SparkContext在初始化的時候會構造出來DAGScheduler和Task Scheduler, 3,應用程序每執行到一個action就會創建一個job,job會提交給DAGSc
相關文章
相關標籤/搜索