Spark性能調優：合理設置並行度

Spark並行度原理 以 Spark 中的 WordCount 做業爲例，每一個Spark做業其實都是一個 Application，每一個 Application 對應多個 Jobs，一個 action 操做（好比 collect）觸發一個 job，在WordCount程序中有一個 job，每一個 job 拆成多個 stage（發生 shuffle 的時候回拆分出一個 stage），reduceB

>>阅读原文<<