解決Spark OOM

spark任務在調試過程中，OOM是非常討厭的一種情況。本文針對Heap OOM的情況先做一定分析，告訴大家如何調參。 1.Heap OOM的現象 如果在Spark UI或者在spark.log中看到如下日誌： java.lang.OutOfMemoryError: GC overhead limit exceeded java.lang.OutOfMemoryError: java heap s

>>阅读原文<<