Spark2.2任務提交運行機制及源碼解析

源碼版本:2.2 參考《Spark內核機制解析及性能調優》 若有錯誤請指正 1、Spark運行的核心概念 Spark調度器的設計體現得很是簡潔清晰和高效,其輸入是Spark RDD,輸出是Spark執行器(Executor)。正是Spark調度器的設計思想極大地區分出了基於MapReduce模型的Hadoop和基於DAG模型的Spark。 主要內容包括Spark運行核心概念,Spark Drive
相關文章
相關標籤/搜索