spark 源碼 ---1-SparkContext-初始化

SparkContext -- v 2.2 Spark的對外接口,代表了與spark 集羣交互的連接,負責向調用這提供Spark的各種功能 主要功能: 在集羣上,創建RDD,累加器,廣播變量等 driver 和 executor都會創建 sparkContext   初始化過程 -- driver 前置條件SparkConf設置: spark.master 必須設置 本地模式爲 local[*]
相關文章
相關標籤/搜索