sparksql調優之第一彈

1,jvm調優算法 這個是扯不斷,理還亂。建議能加內存就加內存,沒事調啥JVM,你都不瞭解JVM和你的任務數據。sql spark調優系列以內存和GC調優 緩存 2,內存調優安全 緩存表併發 spark2.+採用:運維 spark.catalog.cacheTable("tableName")緩存表,spark.catalog.uncacheTable("tableName")解除緩存。機器學習
相關文章
相關標籤/搜索