Spark性能優化之JVM垃圾回收調優

目錄   一:調優的背景 二:動作:(追蹤+清理) 三:特點 四:監測垃圾回收 五:優化方式 1.代碼層面 2.優化executor內存比例 3.JVM的空間分配 六:補充知識點 一:調優的背景 Java虛擬機會定期進行垃圾回收,或內存不夠時主動觸發,GC本身是一條線程,亦需要耗費內存 我們把Task運行的線程叫做工作線程,當GC運行時,會讓工作線程直接停下來,讓GC線程單獨運行,那麼直接影響了S
相關文章
相關標籤/搜索