Spark GC 調優文章推薦

爲什麼我們需要調GC 如果是在以前,ETL爲王的年代,我們其實大可不必去調試,使用默認的 Parallel GC就可以了。但是隨着發展,實時流計算以及AdHoc查詢,對JVM的要求:高吞吐低延遲,又變得非常重要。和傳統Web不同,通常如果一個JVM發生Full GC,僅僅會影響當前到訪問這個JVM的用戶的響應。而對於Spark這種,一個用戶的一個查詢有可能會發生在所有的JVM身上,這意味着有任何一
相關文章
相關標籤/搜索