以wordcount理解spark的執行過程

以wordcount理解spark的執行過程: 一、代碼以及交互界面的迴應: (RDD是spark的核心抽象,全部的計算都圍繞RDD進行,生成RDD,而後能夠對RDD進行各類操做, 這些操做主要有兩類: Transformation(轉換) [一個RDD進過計算生成一個新的RDD,好比接下來示例中的flatMap、map、reduceByKey] 和 Action(動做) [返回結果到Driver
相關文章
相關標籤/搜索