Spark調優 JVM調優

1. 爲何要進行JVM調優？爲何要進行垃圾回收？ Spark是由Scala寫的，而Java和Scala都是運行在JVM上的。而一個executor就是一個JVM進程。node 咱們會把executor分紅兩份，老年代和新生代，比例可能會不同。新生代會分紅三份。web Spark做業開始運行，會不斷的產生對象，對象會首先進入Eden區，而後若是Eden區存儲滿了,對象就會進入survivor1區，若

>>阅读原文<<