Spark的RDD的依賴關係

RDD的依賴關係:寬依賴、窄依賴、Lineage(血統關係) 寬依賴:指的是多個子RDD的Partition會依賴同一個父RDD的Partition,會引起shuffle(可以理解爲超生) 窄依賴:指的是每一個父RDD的Partition最多被子RDD的一個Partition使用(可以理解爲獨生子女)          Lineage:應用在整個過程中,RDD之間形成的產生關係,就叫做血統關係,R
相關文章
相關標籤/搜索