Spark 任務參數配置

三種方式進行指定:web 經過配置文件指定配置:spark-defaults.confsvg 任務提交時命令指定:–conf編碼 代碼中硬編碼:spa val conf = new SparkConf() val sc = new SparkContext(conf) 三種方式的優先級:code 配置文件 << 任務提交 << 代碼配置
相關文章
相關標籤/搜索