Spark物理圖的執行

1、先表結論，如下圖所示： 2、文字說明： 在每個stage階段，是由一系列transformation（或者說task）組成的，每個task對應了一次partitionàpartition的transformation操作；而不同stage之間則是shuffle，當然也是partitionàpartition。 在job中，每個stage階段的partition變換是窄依賴，且partition

>>阅读原文<<