Spark學習之Spark調優與調試(一)

一、使用SparkConf配置Spark   對 Spark 進行性能調優,通常就是修改 Spark 應用的運行時配置選項。Spark 中最主要的配置機制是通過 SparkConf 類對 Spark 進行配置。當創建出一個 SparkContext 時,就需要創建出一個 SparkConf 的實例。 import org.apache.spark.SparkContext import org.a
相關文章
相關標籤/搜索