spark學習筆記(二)----運行模式、spark-submit

spark運行模式 1、application program組成 Job:包含多個Task 組成的並行計算,跟Spark action對應 Stage:Job 的調度單位,對應於TaskSet Taskset:一組關聯的、相互之間沒有shuffle 依賴關係的任務組成的任務集 Task:被送到某個executor 上的工作單元 2、運行流程(以standalone爲例) 程序提交,spark d
相關文章
相關標籤/搜索