RDD-Dependency

概要 上一篇我們介紹了代表RDD組成的(Dependency、Partition、Partitioner)之一的Partition，這篇接着介紹Dependency。Partition記錄的是數據split的邏輯，Dependency記錄的是transformation操作過程中Partition的演化，即這個Partition從哪來到哪去的過程，以及通過Dependency的類型判斷如何處理數據

>>阅读原文<<