spark(13)-RDD的依賴關係(corse22)

1. RDD的依賴關係徹底解密 RDD依賴關係:窄依賴、寬依賴 窄依賴是指每個父RDD的Partition最多被一個子RDD的一個Partition所使用,例如map, filter等都會產生窄依賴 寬依賴是指一個父RDD的Partition被多個子RDD的Partition所使用,例如groupByKey, reduceByKey等操作都會產生寬依賴 總結: 如果父RDD的一個Partition
相關文章
相關標籤/搜索