3.2 RDD依賴與有向無環圖DAG

一、 DAG定義 有向無環圖(DAG):Directed Acycle graph,反應RDD之間的依賴關係; DAG每個節點代表啥?代表的一個RDD transformation: 1) 一個RDD生成兩個RDD: RDD2 = RDD1.filter(xxxxx) RDD3 = RDD1.filter(yyyy) 是從RDD1到RDD2,RDD3這樣的過程 2) Union是兩個RDD合併成一
相關文章
相關標籤/搜索