Spark內部機制學習筆記

1 總體框架結構圖 由上圖我們可以看到Spark應用程序架構主要由Driver Program和Executor構成，Driver負責運行main()和創建SparkContext，Executor主要負責執行Task任務。 2 各大重要組件和概念 2.1 重要概念 概念 功能 模型 備註 Application 用戶定義的Spark應用程序，用戶提交後，Spark會爲應用分配資源，調度和執行相關

>>阅读原文<<