Spark之RDD依賴關係及DAG邏輯視圖

  RDD依賴關係爲成兩種:窄依賴(Narrow Dependency)、寬依賴(Shuffle Dependency)。窄依賴表示每一個父RDD中的Partition最多被子RDD的一個Partition所使用;寬依賴表示一個父RDD的Partition都會被多個子RDD的Partition所使用。html 1、窄依賴解析   RDD的窄依賴(Narrow Dependency)是RDD中最多見
相關文章
相關標籤/搜索