spark-sql調優

sparksql性能調優 性能優化參數  java 在spark中，Spark SQL性能調優只要是經過下面的一些選項進行優化的：node 1 spark.sql.codegen 默認值爲false，當它設置爲true時，Spark SQL會把每條查詢的語句在運行時編譯爲java的二進制代碼。這有什麼做用呢？它能夠提升大型查詢的性能，可是若是進行小規模的查詢的時候反而會變慢，就是說直接用查詢反而比

>>阅读原文<<