JVM源碼分析之SystemGC完全解讀
概述
JVM的GC一般情況下是JVM本身根據一定的條件觸發的,不過我們還是可以做一些人為的觸發,比如通過jvmti做強制GC,通過System.gc觸發,還可以通過jmap來觸發等,針對每個場景其實我們都可以寫篇文章來做一個介紹,本文重點介紹下System.gc的原理
或許大家已經知道如下相關的知識
- system.gc其實是做一次full gc
- system.gc會暫停整個進程
- system.gc一般情況下我們要禁掉,使用-XX:+DisableExplicitGC
- system.gc在cms gc下我們通過-XX:+ExplicitGCInvokesConcurrent來做一次稍微高效點的GC(效果比Full GC要好些)
- system.gc最常見的場景是RMI/NIO下的堆外內存分配等
如果你已經知道上面這些了其實也說明你對System.gc有過一定的了解,至少踩過一些坑,但是你是否更深層次地了解過它,比如
- 為什么CMS GC下-XX:+ExplicitGCInvokesConcurrent這個參數加了之后會比真正的Full GC好?
- 它如何做到暫停整個進程?
- 堆外內存分配為什么有時候要配合System.gc?
如果你上面這些疑惑也都知道,那說明你很懂System.gc了,那么接下來的文字你可以不用看啦
JDK里的System.gc的實現
先貼段代碼吧(java.lang.System)
1
2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 |
|
發現主要調用的是Runtime里的gc方法(java.lang.Runtime)
1
2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 |
|
這里看到gc方法是native的,在java層面只能到此結束了,代碼只有這么多,要了解更多,可以看方法上面的注釋,不過我們需要更深層次地來了解其實現,那還是准備好進入到jvm里去看看
Hotspot里System.gc的實現
如何找到native里的實現
上面提到了Runtime.gc是一個本地方法,那需要先在jvm里找到對應的實現,這里稍微提一下jvm里native方法最常見的也是最簡單的查找,jdk里一般含有native方法的類,一般都會有一個對應的c文件,比如上面的java.lang.Runtime這個類,會有一個Runtime.c的文件和它對應,native方法的具體實現都在里面了,如果你有source,可能會猜到和下面的方法對應
1
2 3 4 5 |
|
其實沒錯的,就是這個方法,jvm要查找到這個native方法其實很簡單的,看方法名可能也猜到規則了,Java_pkgName_className_methodName,其中pkgName里的".“替換成”_“,這樣就能找到了,當然規則不僅僅只有這么一個,還有其他的,這里不細說了,有機會寫篇文章詳細介紹下其中細節
DisableExplicitGC參數
上面的方法里是調用JVM_GC(),實現如下
1
2 3 4 5 6 |
|
看到這里我們已經解釋其中一個疑惑了,就是DisableExplicitGC
這個參數是在哪里生效的,起的什么作用,如果這個參數設置為true的話,那么將直接跳過下面的邏輯,我們通過-XX:+ DisableExplicitGC就是將這個屬性設置為true,而這個屬性默認情況下是true還是false呢
1
2 |
|
ExplicitGCInvokesConcurrent參數
這里主要針對CMSGC下來做分析,所以我們上面看到調用了heap的collect方法,我們找到對應的邏輯
1
2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 |
|
collect里一開頭就有個判斷,如果should_do_concurrent_full_gc返回true,那會執行collect_mostly_concurrent做並行的回收
其中should_do_concurrent_full_gc中的邏輯是如果使用CMS GC,並且是system gc且ExplicitGCInvokesConcurrent==true,那就做並行full gc,當我們設置-XX:+ ExplicitGCInvokesConcurrent的時候,就意味着應該做並行Full GC了,不過要注意千萬不要設置-XX:+DisableExplicitGC,不然走不到這個邏輯里來了
並行Full GC相對正常的Full GC效率高在哪里
stop the world
說到GC,這里要先提到VMThread,在jvm里有這么一個線程不斷輪詢它的隊列,這個隊列里主要是存一些VM_operation的動作,比如最常見的就是內存分配失敗要求做GC操作的請求等,在對gc這些操作執行的時候會先將其他業務線程都進入到安全點,也就是這些線程從此不再執行任何字節碼指令,只有當出了安全點的時候才讓他們繼續執行原來的指令,因此這其實就是我們說的stop the world(STW),整個進程相當於靜止了
CMS GC
這里必須提到CMS GC,因為這是解釋並行Full GC和正常Full GC的關鍵所在,CMS GC我們分為兩種模式background和foreground,其中background顧名思義是在后台做的,也就是可以不影響正常的業務線程跑,觸發條件比如說old的內存占比超過多少的時候就可能觸發一次background式的cms gc,這個過程會經歷CMS GC的所有階段,該暫停的暫停,該並行的並行,效率相對來說還比較高,畢竟有和業務線程並行的gc階段;而foreground則不然,它發生的場景比如業務線程請求分配內存,但是內存不夠了,於是可能觸發一次cms gc,這個過程就必須是要等內存分配到了線程才能繼續往下面走的,因此整個過程必須是STW的,因此CMS GC整個過程都是暫停應用的,但是為了提高效率,它並不是每個階段都會走的,只走其中一些階段,這些省下來的階段主要是並行階段,Precleaning、AbortablePreclean,Resizing這幾個階段都不會經歷,其中sweep階段是同步的,但不管怎么說如果走了類似foreground的cms gc,那么整個過程業務線程都是不可用的,效率會影響挺大。CMS GC具體的過程后面再寫文章詳細說,其過程確實非常復雜的
正常的Full GC
正常的Full GC其實是整個gc過程包括ygc和cms gc(這里說的是真正意義上的Full GC,還有些場景雖然調用Full GC的接口,但是並不會都做,有些時候只做ygc,有些時候只做cms gc)都是由VMThread來執行的,因此整個時間是ygc+cms gc的時間之和,其中CMS GC是上面提到的foreground式的,因此整個過程會比較長,也是我們要避免的
並行的Full GC
並行Full GC也通樣會做YGC和CMS GC,但是效率高就搞在CMS GC是走的background的,整個暫停的過程主要是YGC+CMS_initMark+CMS_remark幾個階段
堆外內存常配合使用System GC
這里說的堆外內存主要針對java.nio.DirectByteBuffer,這些對象的創建過程會通過Unsafe接口直接通過os::malloc來分配內存,然后將內存的起始地址和大小存到java.nio.DirectByteBuffer對象里,這樣就可以直接操作這些內存。這些內存只有在DirectByteBuffer回收掉之后才有機會被回收,因此如果這些對象大部分都移到了old,但是一直沒有觸發CMS GC或者Full GC,那么悲劇將會發生,因為你的物理內存被他們耗盡了,因此為了避免這種悲劇的發生,通過-XX:MaxDirectMemorySize來指定最大的堆外內存大小,當使用達到了閾值的時候將調用System.gc來做一次full gc,以此來回收掉沒有被使用的堆外內存,具體堆外內存是如何回收的,其原理機制又是怎樣的,還是后面寫篇詳細的文章吧
微信公眾號【黃小斜】大廠程序員,互聯網行業新知,終身學習踐行者。關注后回復「Java」、「Python」、「C++」、「大數據」、「機器學習」、「算法」、「AI」、「Android」、「前端」、「iOS」、「考研」、「BAT」、「校招」、「筆試」、「面試」、「面經」、「計算機基礎」、「LeetCode」 等關鍵字可以獲取對應的免費學習資料。