Spark源碼--Dependency

注:本文基於spark-2.4.4版本源碼進行分析 首先從整體上看一下Dependency相關類的繼承關係,有一個直觀的印象:   然後從Dependency源碼開始看。如下圖:   Dependency是一個抽象類,類中的rdd成員是父RDD。 接着看NarrowDependency類:   NarrowDependency是一個抽象類。NarrowDependency覆蓋了Dependency
相關文章
相關標籤/搜索