Spark架構原理-寬依賴和窄依賴

一 概念 窄依賴:父RDD的每個分區只被子RDD的一個分區所使用,可以理解爲父RDD的分區和子RDD的分區關係是一對一。 寬依賴:父RDD的每個分區都可能被多個子RDD分區所使用,可以理解爲父RDD的分區和子RDD的分區關係是一對多。 二 workcount中的依賴關係
相關文章
相關標籤/搜索