Spark經常使用參數解釋及建議值

spark的默認配置文件位於堡壘機上的這個位置: $SPARK_CONF_DIR/spark-defaults.conf，用戶能夠自行查看和理解。html spark及依賴環境版本以下： spark 2.1.0， hadoop 2.7.1 , hive 1.2.1, scala 2.11.8, jdk七、jdk8都可java 須要注意的是，默認值優先級最低，用戶若是提交任務時或者代碼裏明確指定配置

>>阅读原文<<