Spark內核工作流程

這是一個較爲細粒度的Spark運行流程。 我們寫的Spark程序叫做Application。 Application會通過spark-submit來提交給Spark集羣來運行。具體來說就是spark-submit會通過反射機制來創建和構造一個DriverAcor進程出來。這裏的Driver就是我們的驅動程序,它負責執行我們的代碼,當然在執行代碼的時候首先會初始化SparkContext。 在初始化
相關文章
相關標籤/搜索