Spark DAG優化的解讀

一,Spark專業術語的解析 1,Application基於Spark的用戶程序,包含了driver程序和集羣上的executor 2,Driver Program運行main函數而且新建SparkContext的程序 3,Cluster Manager在集羣上獲取資源的外部服務(例如standalone,Mesos,Yarn) 4,Worker Node是集羣中任何能夠運行用代碼的節點 5,Ex
相關文章
相關標籤/搜索