Spark基本概念與執行流程

Spark的基本概念：多線程 （1）Application：表示你的應用程序架構 （2）Driver：表示main()函數，建立SparkContext。由SparkContext負責與ClusterManager通訊，進行資源的申請，任務的分配和監控等。程序執行完畢後關閉SparkContext函數 （3）Executor：某個Application運行在Worker節點上的一個進程，該進程負責

>>阅读原文<<