[Spark參數配置]--1.6.0版本的參數配置

前言html    如下是整理的Spark中的一些配置參數,1.6.0版本的官方文檔請參考Spark Configuration。shell Spark提供三個位置用來配置系統:apache (1)Spark屬性:控制大部分的應用程序參數,能夠用SparkConf對象或者Java系統屬性設置 (2)環境變量:能夠經過每一個節點的conf/spark-env.sh腳本設置。例如IP地址、端口等信息
相關文章
相關標籤/搜索