Spark-----RDD的依賴關係(寬依賴和窄依賴)

目錄 查看RDD的血緣關係 查看RDD的依賴關係 窄依賴 寬依賴 查看RDD的血緣關係 查看RDD的依賴關係 窄依賴 窄依賴相當於OneToOne 如果 B RDD 是由 A RDD 計算得到的, 則 B RDD 就是 Child RDD, A RDD 就是 parent RDD. 如果依賴關係在設計的時候就可以確定, 而不需要考慮父 RDD 分區中的記錄, 並且如果父 RDD 中的每個分區最多隻
相關文章
相關標籤/搜索