spark 經常使用算子 詳解

Spark算子能夠分紅兩大類: 1.Transformation類算子 2.Action類算子。 轉換(轉化操做)算子,這類轉化操做爲懶執行,不會觸發提交做業,從而也不會處理中間過程。Transformation 操做是延遲計算的,也就是說從一個RDD 轉換生成另外一個 RDD 的轉換操做不是立刻執行,須要等到有 Action 操做的時候纔會真正觸發運算。 行動算子,這類算子會觸發SparkCon
相關文章
相關標籤/搜索