spark性能調優一--常規調優

一分配更多的資源 二設置spark application的並行度 三RDD架構重構和優化 四廣播大變量 五在項目中使用Kryo序列化 六在項目中使用fastutil框架 七調節本地化等待時長 一，分配更多的資源 bin/spark-submit \ --class cn.spark.sparktest.core.WordCountCluster \ --driver-memory 100m

>>阅读原文<<