Spark基礎知識04——窄依賴、寬依賴、DAG、緩存

1、寬窄依賴 RDD和它依賴的父RDD(s)的關係有兩種不一樣的類型,即窄依賴(narrow dependency)和寬依賴(wide dependency)。node 窄依賴:apache 窄依賴指的是每個父RDD的Partition最多被子RDD的一個Partition使用緩存 總結:窄依賴咱們形象的比喻爲獨生子女ide 寬依賴oop 寬依賴指的是多個子RDD的Partition會依賴同一個父
相關文章
相關標籤/搜索