圖解Spark內核架構

1. 假設現在有一臺提交spark應用的機器,自己編寫的應用程序在spark中稱爲Application,通過spark-submit結合shell提交Application。 2. 提交之後會在本地客戶端啓動一個進程叫做Driver,spark-submit使用standalone模式提交,會通過反射的方式,創建和構造一個DriverActor進程。 3. Driver進程會先構造SparkCo
相關文章
相關標籤/搜索