Spark總結整理(四)：Spark Core 性能優化之資源調優

Spark性能優化主要分爲：html 開發調優 資源調優 數據傾斜調優 shuffle調優 在開發完Spark做業以後，就該爲做業配置合適的資源了web 資源參數設置的不合理，可能會致使沒有充分利用集羣資源，做業運行會極其緩慢；或者設置的資源過大，隊列沒有足夠的資源來提供，進而致使各類異常緩存 本篇羅列資源調優的注意事項性能優化 1. 引言 建議先了解 Spark做業基本運行原理 和 Spark內

>>阅读原文<<