JVM内存诊断
问题:后台omc系统,经过压力测试之后,进程占用的操作系统内存比例一直居高不下。
怀疑系统可能存在内存泄漏。
排查思路:确定问题范围
收集问题相关情报
根据具体情况,猜测原因
猜测原因,并验证
得出结论
问题解决步骤:使用top命令查看问题进程
top - 17:27:42 up 6 days, 6:29, 17 users, load average: 0.18, 0.06, 0.04 Tasks: 503 total, 1 running, 502 sleeping, 0 stopped, 0 zombie Cpu(s): 0.3%us, 0.4%sy, 0.0%ni, 99.3%id, 0.0%wa, 0.0%hi, 0.0%si, 0.0%st Mem: 32987452k total, 23453436k used, 9534016k free, 343260k buffers Swap: 67108856k total, 27052k used, 67081804k free, 10424144k cached PID USER PR NI VIRT RES SHR S %CPU %MEM TIME+ COMMAND 2424 root 20 0 14.1g 6.8g 20m S 3.3 21.7 176:35.71 java 2757 root 20 0 9305m 490m 13m S 2.0 1.5 4:06.79 java 2673 root 20 0 9909m 1.0g 13m S 1.3 3.3 6:30.64 java
其中,问题进程pid是2424,其所占物理内存比例是21.7%。
查看该虚拟机启动配置信息
JAVA_OPTS="$JAVA_OPTS -d64 -server -Xms128m -Xmx6g -XX:MaxPermSize=1g -XX:+UseParallelGC -XX:ParallelGCThreads=2 -XX:NewRatio=3 -XX:SurvivorRatio=4 -XX:MaxTenuringThreshold=0"
其中,虚拟机运行在server模式,最大堆空间6G,永久代最大值1G。
查看进程内存使用情况
#jmap -heap 2424 Attaching to process ID 2424, please wait... Debugger attached successfully. Server compiler detected. JVM version is 25.121-b13 using thread-local object allocation. Parallel GC with 2 thread(s) Heap Configuration: MinHeapFreeRatio = 0 MaxHeapFreeRatio = 100 MaxHeapSize = 6442450944 (6144.0MB) NewSize = 33554432 (32.0MB) MaxNewSize = 1610612736 (1536.0MB) OldSize = 100663296 (96.0MB) NewRatio = 3 SurvivorRatio = 4 MetaspaceSize = 21807104 (20.796875MB) CompressedClassSpaceSize = 1073741824 (1024.0MB) MaxMetaspaceSize = 17592186044415 MB G1HeapRegionSize = 0 (0.0MB) Heap Usage: PS Young Generation Eden Space: capacity = 1609564160 (1535.0MB) used = 398756176 (380.2835235595703MB) free = 1210807984 (1154.7164764404297MB) 24.77417091593292% used From Space: capacity = 524288 (0.5MB) used = 0 (0.0MB) free = 524288 (0.5MB) 0.0% used To Space: capacity = 524288 (0.5MB) used = 0 (0.0MB) free = 524288 (0.5MB) 0.0% used PS Old Generation capacity = 4268752896 (4071.0MB) used = 618764872 (590.1001663208008MB) free = 3649988024 (3480.899833679199MB) 14.495214107609943% used 46452 interned Strings occupying 4758616 bytes.
其中,堆最大值6G,新生代1536M,老年代4071M。
查看进程内存映像信息
#pmap -x 2424 Address Kbytes RSS Dirty Mode Mapping 0000000000400000 4 4 0 r-x-- java 0000000000600000 4 4 4 rw--- java 0000000000e2c000 936 816 816 rw--- [ anon ] 0000000640000000 4718592 4718592 4718592 rw--- [ anon ] 0000000760000000 1572864 1572864 1572864 rw--- [ anon ] 00000007c0000000 11520 11376 11376 rw--- [ anon ] 00000007c0b40000 1037056 0 0 ----- [ anon ] 0000003784200000 128 108 0 r-x-- ld-2.12.so 000000378441f000 4 4 4 r---- ld-2.12.so 0000003784420000 4 4 4 rw--- ld-2.12.so 0000003784421000 4 4 4 rw--- [ anon ] 0000003784600000 8 8 0 r-x-- libdl-2.12.so 0000003784602000 2048 0 0 ----- libdl-2.12.so 0000003784802000 4 4 4 r---- libdl-2.12.so 0000003784803000 4 4 4 rw--- libdl-2.12.so 0000003784a00000 1576 668 0 r-x-- libc-2.12.so 0000003784b8a000 2044 0 0 ----- libc-2.12.so 0000003784d89000 16 16 8 r---- libc-2.12.so 0000003784d8d000 4 4 4 rw--- libc-2.12.so 0000003784d8e000 20 20 20 rw--- [ anon ] . . . 00007f4511f94000 8 8 0 r--s- bootstrap.jar 00007f4511f96000 32 32 12 rw-s- 2424 00007f4511f9e000 4 4 4 rw--- [ anon ] 00007f4511f9f000 4 0 0 r---- [ anon ] 00007f4511fa0000 4 4 4 rw--- [ anon ] 00007fff23cc5000 84 36 36 rw--- [ stack ] 00007fff23ddf000 4 4 0 r-x-- [ anon ] ffffffffff600000 4 0 0 r-x-- [ anon ] ---------------- ------ ------ ------ total kB 14781668 7171772 7150640
其中,永久代4719M,年轻代1573M。
分析和结论
进程所占物理内存:32768M * 0.21 = 6881M 永久代和年轻代 :4719M + 1573M = 6292M
两者计算较为接近,可认为进程占用的内存结果合理。
虚拟机申请到的堆栈空间,最终并不会释放给操作系统。
验证内存映像信息获取的堆信息正确性 验证步骤:编写可指定新生代和老年代内存占用空间的测试代码
启动测试程序,启动时指定虚拟机启动参数,以方便验证问题
测试程序在新生代占用50M的条件下,记录内存映像
测试程序在新生代占用100M的条件下,记录内存映像
测试程序在新生代占用200M的条件下,记录内存映像
在内存映像中分别查找50M,100M,200M和300M近似大小的记录,并进行位置比对
得出结论
实验步骤:测试程序
import java.util.ArrayList; import java.util.List; public class Test { private static List<Object> list = new ArrayList<Object>(); private static int M_N = 200; public static void main(String[] args) throws InterruptedException { list.add(new byte[1024*1024*M_N]); System.out.println(M_N + "M"); while(true) { Thread.sleep(1000); } } }
50M情况下的内存映像
9934: java -Xmx512m -Xmn128m Test Address Kbytes RSS Dirty Mode Mapping 0000000000400000 4 4 0 r-x-- java 0000000000600000 4 4 4 rw--- java 0000000000999000 132 12 12 rw--- [ anon ] 00000000e0000000 385024 0 0 rw--- [ anon ] 00000000f7800000 8192 0 0 ----- [ anon ] 00000000f8000000 131584 55568 55568 rw--- [ anon ] 0000000100080000 1048064 0 0 ----- [ anon ] 0000003784200000 128 108 0 r-x-- ld-2.12.so 000000378441f000 4 4 4 r---- ld-2.12.so 0000003784420000 4 4 4 rw--- ld-2.12.so 0000003784421000 4 4 4 rw--- [ anon ]
100M情况下的内存映像
Address Kbytes RSS Dirty Mode Mapping 0000000000400000 4 4 0 r-x-- java 0000000000600000 4 4 4 rw--- java 0000000000f36000 132 12 12 rw--- [ anon ] 00000000e0000000 385024 104448 104448 rw--- [ anon ] 00000000f7800000 8192 0 0 ----- [ anon ] 00000000f8000000 131584 2320 2320 rw--- [ anon ] 0000000100080000 1048064 0 0 ----- [ anon ] 0000003784200000 128 108 0 r-x-- ld-2.12.so 000000378441f000 4 4 4 r---- ld-2.12.so 0000003784420000 4 4 4 rw--- ld-2.12.so 0000003784421000 4 4 4 rw--- [ anon ]
200M情况下的内存映像
16130: java -Xmx512m -Xmn128m Test Address Kbytes RSS Dirty Mode Mapping 0000000000400000 4 4 0 r-x-- java 0000000000600000 4 4 4 rw--- java 0000000001832000 132 12 12 rw--- [ anon ] 00000000e0000000 385024 206848 206848 rw--- [ anon ] 00000000f7800000 8192 0 0 ----- [ anon ] 00000000f8000000 131584 2320 2320 rw--- [ anon ] 0000000100080000 1048064 0 0 ----- [ anon ] 0000003784200000 128 108 0 r-x-- ld-2.12.so 000000378441f000 4 4 4 r---- ld-2.12.so 0000003784420000 4 4 4 rw--- ld-2.12.so 0000003784421000 4 4 4 rw--- [ anon ]
分析并得出结论
虚拟机堆内存512M,且新生代是128M,如果创建50M或者100M对象,则虚拟机会在新生代中创建;如果创建200M大小对象,因为新生代空间不够,虚拟机会选择在老年代直接创建。
根据步骤2,55568kb与50M接近;步骤3中,104448kb与100M接近;步骤4中,206848kb与200M接近。依此可推知,pmap命令输出的第5行信息是指老年代,第7行是指年轻代。