RDD

RDD計算方式 RDD的寬窄依賴   窄依賴 (narrowdependencies) 和寬依賴 (widedependencies) 。 窄依賴是指 父 RDD 的每個分區都只被子 RDD 的一個分區所使用 。 寬依賴就是指父 RDD 的分區（父RDD被切分並分發了）被多個子 RDD 的分區所依賴。 這種劃分有兩個用處： 首先，窄依賴支持在一個節點上管道化執行。例如基於一對一的關係，可以在 fi

>>阅读原文<<