Spark2.x學習筆記:七、Spark應用程序設計

七、 Spark應用程序設計 7.1 基本流程 1.建立SparkContext對象apache 每一個Spark應用程序有且僅有一個SparkContext對象,封裝了Spark執行環境信息 2.建立RDD緩存 能夠衝Scala集合或者Hadoop數據集上建立 3.在RDD之上進行轉換和Action併發 MapReduce只提供了map和reduce兩種操做,而Spark提供了多種轉換和acti
相關文章
相關標籤/搜索