Spark SQL 查詢中 Coalesce 和 Repartition 暗示（Hint）

若是你使用 Spark RDD 或者 DataFrame 編寫程序，咱們能夠經過 coalesce或 repartition 來修改程序的並行度：php val data = sc.newAPIHadoopFile(xxx).coalesce(2).map(xxxx)java 或sql val data = sc.newAPIHadoopFile(xxx).repartition(2).map(x

>>阅读原文<<