spark-原理總結

一、總體框架結構圖   由上圖我們可以看到Spark應用程序架構主要由Driver Program和Executor構成，Driver負責運行main()和創建SparkContext，Executor主要負責執行Task任務。 二、各大重要組件和概念 2.1 重要概念 概念 功能 Application 用戶定義的Spark應用程序，用戶提交後，Spark會爲應用分配資源，調度和執行相關任務 J

>>阅读原文<<