Spark性能調優-總結分享

一、Spark調優背景 目前Zeppelin已經上線一段時間，Spark做爲底層SQL執行引擎，須要進行總體性能調優，來提升SQL查詢效率。本文主要給出調優的結論，由於涉及參數不少，故沒有很細粒度調優，但總體調優方向是能夠得出的。node 環境：服務器600+，spark 2.0.2，Hadoop 2.6.0sql 二、調優結果 調優隨機選取線上9條SQL，表橫軸是調優測試項目，測試在集羣空閒狀況

>>阅读原文<<