【Spark】Spark九: 深入Spark RDD第二部分RDD依賴與運行時

在Spark中, RDD是有依賴關係的,這種依賴關係有兩種類型 窄依賴(Narrow Dependency) 寬依賴(Wide Dependency) 以下圖說明RDD的窄依賴和寬依賴     窄依賴 窄依賴指父RDD的每一個分區最多被一個子RDD的分區所用,表現爲 一個父RDD的分區對應於一個子RDD的分區 兩個父RDD的分區對應於一個子RDD 的分區。 如上面的map,filter,union
相關文章
相關標籤/搜索