spark RDD依賴類型

sparkRDD依賴html RDD的最重要的特性之一就是血緣關係,血緣關係描述了一個RDD是如何從父RDD計算得來的。其中Dependency的rdd方法返回一個RDD,及所依賴的RDD.apache abstract class Dependency[T] extends Serializable { def rdd: RDD[T] }Dependency分爲兩種, narrow和shuf
相關文章
相關標籤/搜索