Spark Core 調優指南

1 體系 2 配置 資源分配 num-executors：executor的個數 executor-cores：cpu core 的兩倍 executor-memory：每個executor的內存大小 driver-memory：driver的內存大小 並行度 spark.default.parallelism spark.sql.partitions repartition(num) 內存使用

>>阅读原文<<