JVM GC(整理)

1 GC類型

1 )YGC html

通常狀況下,當新對象生成,而且在Eden申請空間失敗時,就好觸發YGC ,堆Eden區域進行GC,清除非存活對象,而且把尚且存活的對象移動到Survivor區。而後整理Survivor的兩個區。 java

2) Full GC web

對整個堆進行整理,包括Young、Tenured和Perm。Full GC比Scavenge GC要慢,所以應該儘量減小Full GC。算法

2 GC觸發條件

GC類型數組

觸發條件緩存

觸發上下文服務器

YGC多線程

eden空間不足併發

清空Eden+from survivor中全部no ref的對象佔用的內存app

將eden+from sur中全部存活的對象copy到to sur中

一些對象將晉升到old中:

to sur放不下的

存活次數超過turning threshold中的

從新計算tenuring threshold(serial parallel GC會觸發此項)

從新調整Eden 和from的大小(parallel GC會觸發此項)

FGC

old空間不足;

perm空間不足;

顯示調用System.GC, RMI等的定時觸發;

YGC時的悲觀策略;

dump live的內存信息時

(jmap –dump:live);

Tenured被寫滿;

上一次GC以後Heap的各域分配策略動態變化

清空heap中no ref的對象
permgen中已經被卸載的classloader中加載的class信息

如配置了CollectGenOFirst,則先觸發YGC(針對serial GC)

如配置了ScavengeBeforeFullGC,則先觸發YGC(針對serial GC)

注意:GC時程序全面暫停應用是否爲多線程處理由具體的GC決定,是否壓縮須要看配置的具體GC;

可以使用jstat –gcutil gc log 查看;

permanent generation空間不足會引起Full GC,仍然不夠會引起PermGen Space錯誤。

3 如何觀察GC

1)Jstat 實時查看gc狀態

用法:jstat –gcutil 進程號 時間(毫秒)

也能夠在java程序啓動的opt里加上以下幾個參數(注:這兩個參數只針對SUN的HotSpot VM): 

-XX:-PrintGC     Print messages at garbage collection. Manageable. 

-XX:-PrintGC Details     Print more details at garbage collection. Manageable. (Introduced in 1.4.0.) 

-XX:-PrintGCTimeStamps     Print timestamps at garbage collection. Manageable (Introduced in 1.4.0.) 

當把-XX:-PrintGC Details 加入到java opt裏之後能夠看見以下輸出: 

[GC [DefNew: 34538K->2311K(36352K), 0.0232439 secs] 45898K->15874K(520320K), 0.0233874 secs] 

[Full GC [Tenured: 13563K->15402K(483968K), 0.2368177 secs] 21163K->15402K(520320K), [Perm : 28671K->28635K(28672K)], 0.2371537 secs] 

他們分別顯示了GC的過程,清理出了多少空間。第一行GC使用的是 ‘普通GC’(Minor Collections),第二行使用的是 ‘全GC’(Major Collections)。他們的區別很大,在第一行最後能夠看見他的時間是0.0233874秒,而第二行的Full GC的時間是0.2371537秒。第二行的時間是第一行的接近10倍,也就是此次調優的重點,減小Full GC 的次數,由於Full GC 會暫停程序比較長的時間,若是Full GC 的次數比較多。程序就會常常性的假死。

2)Jmap 查看java進程對象情況

用法:jmap –histo:live 進程id,打印每一個類實例數量

用法:jmap –dump:format=b,file=log.bin 進程id,拷貝jvm整個內存鏡像,分析每一個對象佔用的內存情況。

3)Jstack 查看java進程id的堆棧信息

用法:jstack 進程id,查看死循環線程頗有效,能夠直接找出哪一個線程在哪一個方法內死循環

4)Jconsole

5) Jvisualvm 上述幾個工具的集合體

 

4 GC調整涉及JVM參數

參數名稱

含義

默認值

 

-Xms

初始堆大小

物理內存的1/64(<1GB)

默認(MinHeapFreeRatio參數能夠調整)空餘堆內存小於40%時,JVM就會增大堆直到-Xmx的最大限制.

-Xmx

最大堆大小

物理內存的1/4(<1GB)

默認(MaxHeapFreeRatio參數能夠調整)空餘堆內存大於70%時,JVM會減小堆直到 -Xms的最小限制

-Xmn

年輕代大小(1.4or lator)

 

注意:此處的大小是(eden+ 2 survivor space).與jmap -heap中顯示的New gen是不一樣的。
整個堆大小=年輕代大小 + 年老代大小 + 持久代大小.
增大年輕代後,將會減少年老代大小.此值對系統性能影響較大,Sun官方推薦配置爲整個堆的3/8

-XX:NewSize

設置年輕代大小(for 1.3/1.4)

 

 

-XX:MaxNewSize

年輕代最大值(for 1.3/1.4)

 

 

-XX:PermSize

設置持久代(perm gen)初始值

物理內存的1/64

 

-XX:MaxPermSize

設置持久代最大值

物理內存的1/4

 

-Xss

每一個線程的堆棧大小

 

JDK5.0之後每一個線程堆棧大小爲1M,之前每一個線程堆棧大小爲256K.更具應用的線程所需內存大小進行 調整.

在相同物理內存下,減少這個值能生成更多的線程.可是操做系統對一個進程內的線程數仍是有限制的,

不能無限生成,經驗值在3000~5000左右通常小的應用, 若是棧不是很深, 應該是128k夠用的 大的應用

建議使用256k。這個選項對性能影響比較大,須要嚴格的測試。
和threadstacksize選項解釋很相似,官方文檔彷佛沒有解釋,在論壇中有這樣一句話:"」
-Xss is translated in a VM flag named ThreadStackSize」
通常設置這個值就能夠了。

-XX:ThreadStackSize

Thread Stack Size

 

(0 means use default stack size) [Sparc: 512; Solaris x86: 320 (was 256 prior in 5.0 and earlier);

 Sparc 64 bit: 1024; Linux amd64: 1024 (was 0 in 5.0 and earlier); all others 0.]

-XX:NewRatio

年輕代(包括Eden和兩個Survivor區)與年老代的比值(除去持久代)

 

-XX:NewRatio=4表示年輕代與年老代所佔比值爲1:4,年輕代佔整個堆棧的1/5
Xms=Xmx而且設置了Xmn的狀況下,該參數不須要進行設置。

-XX:SurvivorRatio

Eden區與Survivor區的大小比值

 

設置爲8,則兩個Survivor區與一個Eden區的比值爲2:8,一個Survivor區佔整個年輕代的1/10

-XX:LargePageSizeInBytes

內存頁的大小不可設置過大, 會影響Perm的大小

 

=128m

-XX:+UseFastAccessorMethods

原始類型的快速優化

 

 

-XX:+DisableExplicitGC

關閉System.gc()

 

這個參數須要嚴格的測試

-XX:MaxTenuringThreshold

垃圾最大年齡

 

若是設置爲0的話,則年輕代對象不通過Survivor區,直接進入年老代. 對於年老代比較多的應用,能夠提升效率.

若是將此值設置爲一個較大值,則年輕代對象會在Survivor區進行屢次複製,這樣能夠增長對象再年輕代的存活 時間,

增長在年輕代即被回收的機率該參數只有在串行GC時纔有效.

-XX:+AggressiveOpts

加快編譯

 

 

-XX:+UseBiasedLocking

鎖機制的性能改善

 

 

-Xnoclassgc

禁用垃圾回收

 

 

-XX:SoftRefLRUPolicyMSPerMB

每兆堆空閒空間中SoftReference的存活時間

1s

softly reachable objects will remain alive for some amount of time after the last time

 they were referenced. The default value is one second of lifetime per free megabyte

 in the heap

-XX:PretenureSizeThreshold

對象超過多大是直接在舊生代分配

0

單位字節 新生代採用Parallel Scavenge GC時無效
另外一種直接在舊生代分配的狀況是大的數組對象,且數組中無外部引用對象.

-XX:TLABWasteTargetPercent

TLAB佔eden區的百分比

1%

 

-XX:+CollectGen0First

FullGC時是否先YGC

false

 

4.1並行收集器相關參數

參數名稱

含義

默認值

 

-XX:+UseParallelGC

Full GC採用parallel MSC
(此項待驗證)

 

選擇垃圾收集器爲並行收集器.此配置僅對年輕代有效.即上述配置下,年輕代使用併發收集,而年老代仍舊使用串行收集.(此項待驗證)

-XX:+UseParNewGC

設置年輕代爲並行收集

 

可與CMS收集同時使用
JDK5.0以上,JVM會根據系統配置自行設置,因此無需再設置此值

-XX:ParallelGCThreads

並行收集器的線程數

 

此值最好配置與處理器數目相等 一樣適用於CMS

-XX:+UseParallelOldGC

年老代垃圾收集方式爲並行收集(Parallel Compacting)

 

這個是JAVA 6出現的參數選項

-XX:MaxGCPauseMillis

每次年輕代垃圾回收的最長時間(最大暫停時間)

 

若是沒法知足此時間,JVM會自動調全年輕代大小,以知足此值.

-XX:+UseAdaptiveSizePolicy

自動選擇年輕代區大小和相應的Survivor區比例

 

設置此選項後,並行收集器會自動選擇年輕代區大小和相應的Survivor區比例,以達到目標系統規定的最低相應時間或者收集頻率等,此值建議使用並行收集器時,一直打開.

-XX:GCTimeRatio

設置垃圾回收時間佔程序運行時間的百分比

 

公式爲1/(1+n)

-XX:+ScavengeBeforeFullGC

Full GC前調用YGC

true

Do young generation GC prior to a full GC. (Introduced in 1.4.1.)

 

4.2 CMS相關參數

參數名稱

含義

默認值

 

-XX:+UseConcMarkSweepGC

使用CMS內存收集

 

測試中配置這個之後,-XX:NewRatio=4的配置失效了,緣由不明.因此,此時年輕代大小最好用-Xmn設置.???

-XX:+AggressiveHeap

 

 

試圖是使用大量的物理內存
長時間大內存使用的優化,能檢查計算資源(內存, 處理器數量)
至少須要256MB內存
大量的CPU/內存, (在1.4.1在4CPU的機器上已經顯示有提高)

-XX:CMSFullGCsBeforeCompaction

多少次後進行內存壓縮

 

因爲併發收集器不對內存空間進行壓縮,整理,因此運行一段時間之後會產生"碎片",使得運行效率下降.此值設置運行多少次GC之後對內存空間進行壓縮,整理.

-XX:+CMSParallelRemarkEnabled

下降標記停頓

 

 

-XX+UseCMSCompactAtFullCollection

在FULL GC的時候, 對年老代的壓縮

 

CMS是不會移動內存的, 所以, 這個很是容易產生碎片, 致使內存不夠用, 所以, 內存的壓縮這個時候就會被啓用。 增長這個參數是個好習慣。
可能會影響性能,可是能夠消除碎片

-XX:+UseCMSInitiatingOccupancyOnly

使用手動定義初始化定義開始CMS收集

 

禁止hostspot自行觸發CMS GC

-XX:CMSInitiatingOccupancyFraction=70

使用cms做爲垃圾回收
使用70%後開始CMS收集

92

爲了保證不出現promotion failed(見下面介紹)錯誤,該值的設置須要知足如下公式CMSInitiatingOccupancyFraction計算公式

-XX:CMSInitiatingPermOccupancyFraction

設置Perm Gen使用到達多少比率時觸發

92

 

-XX:+CMSIncrementalMode

設置爲增量模式

 

用於單CPU狀況

-XX:+CMSClassUnloadingEnabled

 

 

 

 

備註:

CMSInitiatingOccupancyFraction計算公式

CMSInitiatingOccupancyFraction值與Xmn的關係公式

上面介紹了promontion faild產生的緣由是EDEN空間不足的狀況下將EDEN與From survivor中的存活對象存入To survivor區時,To survivor區的空間不足,再次晉升到old gen區,而old gen區內存也不夠的狀況下產生了promontion faild從而致使full gc.那能夠推斷出:eden+from survivor < old gen區剩餘內存時,不會出現promontion faild的狀況,即:
(Xmx-Xmn)*(1-CMSInitiatingOccupancyFraction/100)>=(Xmn-Xmn/(SurvivorRatior+2))  進而推斷出:

CMSInitiatingOccupancyFraction <=((Xmx-Xmn)-(Xmn-Xmn/(SurvivorRatior+2)))/(Xmx-Xmn)*100

例如:

當xmx=128 xmn=36 SurvivorRatior=1時 

CMSInitiatingOccupancyFraction<=((128.0-36)-(36-36/(1+2)))/(128-36)*100 =73.913

當xmx=128 xmn=24 SurvivorRatior=1時 

CMSInitiatingOccupancyFraction<=((128.0-24)-(24-24/(1+2)))/(128-24)*100=84.615…

當xmx=3000 xmn=600 SurvivorRatior=1時

CMSInitiatingOccupancyFraction<=((3000.0-600)-(600-600/(1+2)))/(3000-600)*100=83.33

CMSInitiatingOccupancyFraction低於70% 須要調整xmn或SurvivorRatior值。

令:

網上一童鞋推斷出的公式是:

(Xmx-Xmn)*(100-CMSInitiatingOccupancyFraction)/100>=Xmn 這個公式我的認爲不是很嚴謹,在內存小的時候會影響xmn的計算。

 

4.3 輔助信息

參數名稱

含義

 

-XX:+PrintGC

 

輸出形式:

[GC 118250K->113543K(130112K), 0.0094143 secs]
[Full GC 121376K->10414K(130112K), 0.0650971 secs]

-XX:+PrintGCDetails

 

輸出形式:[GC [DefNew: 8614K->781K(9088K), 0.0123035 secs] 118250K->113543K(130112K), 0.0124633 secs]
[GC [DefNew: 8614K->8614K(9088K), 0.0000665 secs][Tenured: 112761K->10414K(121024K), 0.0433488 secs] 121376K->10414K(130112K), 0.0436268 secs]

-XX:+PrintGCTimeStamps

 

 

-XX:+PrintGC:PrintGCTimeStamps

 

可與-XX:+PrintGC -XX:+PrintGCDetails混合使用
輸出形式:11.851: [GC 98328K->93620K(130112K), 0.0082960 secs]

-XX:+PrintGCApplicationStoppedTime

打印垃圾回收期間程序暫停的時間.可與上面混合使用

輸出形式:Total time for which application threads were stopped: 0.0468229 seconds

-XX:+PrintGCApplicationConcurrentTime

打印每次垃圾回收前,程序未中斷的執行時間.可與上面混合使用

輸出形式:Application time: 0.5291524 seconds

-XX:+PrintHeapAtGC

打印GC先後的詳細堆棧信息

 

-Xloggc:filename

把相關日誌信息記錄到文件以便分析.
與上面幾個配合使用

 

-XX:+PrintClassHistogram

garbage collects before printing the histogram.

 

-XX:+PrintTLAB

查看TLAB空間的使用狀況

 

XX:+PrintTenuringDistribution

查看每次minor GC後新的存活週期的閾值

Desired survivor size 1048576 bytes, new threshold 7 (max 15)
new threshold 7即標識新的存活週期的閾值爲7。

 

 

 

4 GC經驗&常規原則

1)年輕代大小選擇

l 響應時間優先的應用:儘量設大,直到接近系統的最低響應時間限制(根據實際狀況選擇).在此種狀況下,年輕代收集發生的頻率也是最小的.同時,減小到達年老代的對象.

l 吞吐量優先的應用:儘量的設置大,可能到達Gbit的程度.由於對響應時間沒有要求,垃圾收集能夠並行進行,通常適合8CPU以上的應用.

l 避免設置太小.當新生代設置太小時會致使:1.YGC次數更加頻繁 2.可能致使YGC對象直接進入舊生代,若是此時舊生代滿了,會觸發FGC.

2)年老代大小選擇

l 響應時間優先的應用:年老代使用併發收集器,因此其大小須要當心設置,通常要考慮併發會話率和會話持續時間等一些參數.若是堆設置小了,能夠會形成內存碎片,高回收頻率以及應用暫停而使用傳統的標記清除方式;若是堆大了,則須要較長的收集時間.最優化的方案,通常須要參考如下數據得到:併發垃圾收集信息、持久代併發收集次數、傳統GC信息、花在年輕代和年老代回收上的時間比例。

l 吞吐量優先的應用:通常吞吐量優先的應用都有一個很大的年輕代和一個較小的年老代.緣由是,這樣能夠儘量回收掉大部分短時間對象,減小中期的對象,而年老代盡存放長期存活對象.

3)較小堆引發的碎片問題。

由於年老代的併發收集器使用標記,清除算法,因此不會對堆進行壓縮.當收集器回收時,他會把相鄰的空間進行合併,這樣能夠分配給較大的對象.可是,當堆空間較小時,運行一段時間之後,就會出現"碎片",若是併發收集器找不到足夠的空間,那麼併發收集器將會中止,而後使用傳統的標記,清除方式進行回收.若是出現"碎片",可能須要進行以下配置:

-XX:+UseCMSCompactAtFullCollection:使用併發收集器時,開啓對年老代的壓縮.

-XX:CMSFullGCsBeforeCompaction=0:上面配置開啓的狀況下,這裏設置多少次Full GC後,對年老代進行壓縮

4)用64位操做系統,Linux下64位的jdk比32位jdk要慢一些,可是吃得內存更多,吞吐量更大

5)XMX和XMS設置同樣大,MaxPermSize和MinPermSize設置同樣大,這樣能夠減輕伸縮堆大小帶來的壓力

6)使用CMS的好處是用盡可能少的新生代,經驗值是128M-256M, 而後老生代利用CMS並行收集, 這樣能保證系統低延遲的吞吐效率。 實際上cms的收集停頓時間很是的短,2G的內存, 大約20-80ms的應用程序停頓時間

7)系統停頓的時候多是GC的問題也多是程序的問題,多用jmap和jstack查看,或者killall -3 java,而後查看java控制檯日誌,能看出不少問題。

8)仔細瞭解本身的應用,若是用了緩存,那麼年老代應該大一些,緩存的HashMap不該該無限制長,建議採用LRU算法的Map作緩存,LRUMap的最大長度也要根據實際狀況設定。

9)採用併發回收時,年輕代小一點,年老代要大,

由於年老大用的是併發回收,即便時間長點也不會影響其餘程序繼續運行,網站不會停頓

10)JVM參數的設置(特別是 

–Xmx –Xms –Xmn -XX:SurvivorRatio  -XX:MaxTenuringThreshold等參數的設置沒有一個固定的公式,須要根據PV old區實際數據 YGC次數等多方面來衡量。爲了不promotion faild可能會致使xmn設置偏小,也意味着YGC的次數會增多,處理併發訪問的能力降低等問題。每一個參數的調整都須要通過詳細的性能測試,才能找到特定應用的最佳配置。

11)promotion failed:

垃圾回收時promotion failed是個很頭痛的問題,通常多是兩種緣由產生,第一個緣由是救助空間不夠,救助空間裏的對象還不該該被移動到年老代,但年輕代又有不少對象須要放入救助空間;第二個緣由是年老代沒有足夠的空間接納來自年輕代的對象;這兩種狀況都會轉向Full GC,網站停頓時間較長。

解決方方案一:

第一個緣由個人最終解決辦法是去掉救助空間,設置-XX:SurvivorRatio=65536 -XX:MaxTenuringThreshold=0便可,第二個緣由個人解決辦法是設置CMSInitiatingOccupancyFraction爲某個值(假設70),這樣年老代空間到70%時就開始執行CMS,年老代有足夠的空間接納來自年輕代的對象。

解決方案一的改進方案:

又有改進了,上面方法不太好,由於沒有用到救助空間,因此年老代容易滿,CMS執行會比較頻繁。我改善了一下,仍是用救助空間,可是把救助空間加大,這樣也不會有promotion failed。具體操做上,32位Linux和64位Linux好像不同,64位系統彷佛只要配置MaxTenuringThreshold參數,CMS仍是有暫停。爲了解決暫停問題和promotion failed問題,最後我設置-XX:SurvivorRatio=1 ,並把MaxTenuringThreshold去掉,這樣即沒有暫停又不會有promotoin failed,並且更重要的是,年老代和永久代上升很是慢(由於好多對象到不了年老代就被回收了),因此CMS執行頻率很是低,好幾個小時才執行一次,這樣,服務器都不用重啓了。

-Xmx4000M -Xms4000M -Xmn600M 

-XX:PermSize=500M -XX:MaxPermSize=500M 

-Xss256K -XX:+DisableExplicitGC 

-XX:SurvivorRatio=1 -XX:+UseConcMarkSweepGC 

-XX:+UseParNewGC -XX:+CMSParallelRemarkEnabled 

-XX:+UseCMSCompactAtFullCollection -XX:CMSFullGCsBeforeCompaction=0 

-XX:+CMSClassUnloadingEnabled -XX:LargePageSizeInBytes=128M 

-XX:+UseFastAccessorMethods -XX:+UseCMSInitiatingOccupancyOnly 

-XX:CMSInitiatingOccupancyFraction=80 -XX:SoftRefLRUPolicyMSPerMB=0 

-XX:+PrintClassHistogram -XX:+PrintGCDetails

-XX:+PrintGCTimeStamps -XX:+PrintHeapAtGC -Xloggc:log/gc.log

 

 

參考:http://www.cnblogs.com/redcreen/archive/2011/05/05/2038331.html

相關文章
相關標籤/搜索