Spark寬依賴 窄依賴 Job Stage Executor Task 總結

文章授權自： http://www.6aiq.com/article/1547041236424 寬依賴與窄依賴 窄依賴（narrow dependency）和寬依賴（wide dependency, 也稱 shuffle dependency）. 窄依賴是指父RDD的每個分區只被子RDD的一個分區所使用，子RDD分區通常對應常數個父RDD分區(O(1)，與數據規模無關), map/filter和

>>阅读原文<<