Spark調優 JVM調優

1. 爲何要進行JVM調優?爲何要進行垃圾回收? Spark是由Scala寫的,而Java和Scala都是運行在JVM上的。而一個executor就是一個JVM進程。node 咱們會把executor分紅兩份,老年代和新生代,比例可能會不同。新生代會分紅三份。web Spark做業開始運行,會不斷的產生對象,對象會首先進入Eden區,而後若是Eden區存儲滿了,對象就會進入survivor1區,若
相關文章
相關標籤/搜索