【Spark】SparkCore解析(一):寬依賴和窄依賴

何爲依賴? 因爲RDD是粗粒度的操做數據集,每一個Transformation操做都會生成一個新的RDD,因此RDD之間就會造成相似流水線的先後依賴關係;RDD和它依賴的父RDD(s)的關係有兩種不一樣的類型,即窄依賴(narrow dependency)和寬依賴(wide dependency)。如圖所示顯示了RDD之間的依賴關係👇 web 窄依賴:是指每一個父RDD的每一個Partition
相關文章
相關標籤/搜索