Spark Shuffle過程

job :由一個 rdd 的 action 觸發的動作，可以簡單的理解爲，當你需要執行一個 rdd 的 action 的時候，會生成一個 job。Job簡單講就是提交給spark的任務。 stage : stage 是一個 job 的組成單位，就是說，一個 job 會被切分成 1 個或 1 個以上的 stage，然後各個 stage 會按照執行順序依次執行。簡單地說Stage是每一個job處理過程

>>阅读原文<<