Spark 的工作流程

Spark工作流程中基本概念 Application：應用程序 Driver：表示main()函數，創建SparkContext。由SparkContext負責與ClusterManager通信，進行資源的申請，任務的分配和監控等。程序執行完畢後關閉SparkContext Executor：某個Application運行在Worker節點上的一個進程，該進程負責運行某些Task，並且負責將數據存

>>阅读原文<<