Spark DAG優化的解讀

一，Spark專業術語的解析 1，Application基於Spark的用戶程序，包含了driver程序和集羣上的executor 2，Driver Program運行main函數並且新建SparkContext的程序 3，Cluster Manager在集羣上獲取資源的外部服務(例如standalone,Mesos,Yarn) 4，Worker Node是集羣中任何可以運行用代碼的節點 5，Ex

>>阅读原文<<