寬依賴和窄依賴的區別

寬依賴和窄依賴的區別 參考： https://blog.csdn.net/u013384984/article/details/80963455 總結一下： 窄依賴：父RDD中，每個分區內的數據，都只會被子RDD中特定的分區所消費，爲窄依賴： **寬依賴：**父RDD中，分區內的數據，會被子RDD內多個分區消費，則爲寬依賴： 會產生shuffle,遇到寬依賴，則劃分爲多個stage

>>阅读原文<<