(RDD)Lineage 血緣關係 和 Dependence 依賴關係

1)Lineage 說明ide     Lineage  保存了RDD的依賴關係 函數     如:有這樣的依賴關係:A =map=> B =filter=>C 性能            假設B的RDD某個分區掛了,就能夠經過血緣關係從新計算map的函數獲取回來spa             即:一個RDD是如何從父RDD計算過來的 blog 2)假如某RDD的分區是經過幾個分區reduceby
相關文章
相關標籤/搜索