spark中job,stage,task之間的關係

1. 什麼是job Job簡單講就是提交給spark的任務。 2. 什麼是stage Stage是每一個job處理過程要分爲的幾個階段。 3什麼是task Task是每一個job處理過程要分幾爲幾次任務。Task是任務運行的最小單位。最終是要以task爲單位運行在executor中。 3. Job和stage和task之間有什麼關係 Job----> 一個或多個stage---> 一個或多個tas
相關文章
相關標籤/搜索