Spark工作流程簡述

這是參加東軟大數據實習的一份平時作業，圖片內容來源於課件。 Spark工作流程簡述 用戶構建Spark Application的運行環境，啓動SparkContext（上下文） 用戶編寫程序提交到Master上 Master構建一個有向無環圖（DAG） 根據DAG生成不同的TaskSet任務集 Master上面的Task Scheduler會把任務集分配給若干個Worker節點 worker節點會

>>阅读原文<<