[JVM教程与调优] 了解JVM 堆内存溢出以及非堆内存溢出

在上一章中我们介绍了JVM运行时参数以及jstat指令相关内容:[JVM教程与调优] 什么是JVM运行时参数?。下面我们来介绍一下jmap+MAT内存溢出。
首先我们来介绍一下下JVM的内存结构。
JVM内存结构介绍

从图中我们可以看到,JVM的内存结构分为两大块。一块叫堆区,一块叫非堆区。
堆区又分为两大块,一块Young,一块叫Old。Young区又分为Survivor区和Eden区。Survivor区我们又分为S0与S1。可以结合下图进行理解

非堆区呢,是属于我们操作系统的本地内存。它是独立于我们堆区之外的。它在JDK1.8里面有一个新的名字,叫Metaspace。Metaspace里面还包含几个块,其中有一块就是CCS,还有一块是CodeCache。当然,在我们的Metaspace中还包含很多其他块,这里就不做扩展了。
接下来,我们来通过实战,来更加深入的理解JVM结构,以及出现JVM内存溢出的原因。
实战理解
我们通过spring.start快速来生成一个springboot项目。

如图,我们快速的创建一个springboot项目,并将其下载下来。
这里我使用Eclipse,小伙伴们也可以使用IDEA或者其他开发工具也是可以的。
这里我们使用的是SpringBoot工程,如果有的小伙伴对SpringBoot还不太熟悉的,可以上网找一些教程先学习了解一下。
堆内存溢出演示
那么我们如何来构建一个堆内存溢出呢?其实很简单,我们只要定义一个List对象,然后通过一个循环不停的往List里面塞对象。因为只要Controller不被回收,那么它里面的成员变量也是不会被回收的。这样就会导致List里面的对象越来越多,占用的内存越来越大,最后就把我们的内存撑爆了。
创建User对象
这里我们先创建一个User对象。
/**
*
* <p>Title: User</p>
* <p>Description: </p>
* @author Coder编程
* @date 2020年3月29日
*/
@Data
@AllArgsConstructor
@NoArgsConstructor
public class User {
private int id;
private String name;
}
这里面@Data、@AllArgsConstructor、@NoArgsConstructor用的是lombok注解。不会使用的小伙伴,可以在网上查找相关资料学习一下。
创建Controller对象
接下来我们来创建一个Controller来不停的往List集合中塞对象。
/**
*
* <p>Title: MemoryController</p>
* <p>Description: </p>
* @author Coder编程
* @date 2020年3月29日
*/
@RestController
public class MemoryController {
private List<User> userList = new ArrayList<User>();
/**
* -Xmx32M -Xms32M
* */
@GetMapping("/heap")
public String heap() {
int i=0;
while(true) {
userList.add(new User(i++, UUID.randomUUID().toString()));
}
}
}
为了更快达到我们的效果,我们来设置两个参数。
-Xmx32M -Xms32M
一个最大内存,一个最小内存。我们的堆就只有32M,这样就很容易溢出。
访问测试
启动时候设置内存参数。


记得选中我们的Arguments,在JVM 参数中,将我们的值设置进去。最后点击Run运行起来。
然后我们在浏览器中请求:
http://localhost:8080/heap
我们再观察控制台打印:

通过打印结果,我们可以看到堆内存溢出了。
注意:
这里我们测试的时候可以很简单的看出在哪里出现的问题,但是在实际生产环境中并没有那么简单,因此我们需要借助工具,来定位这些问题。后续我们来介绍一下。
非堆内存溢出演示
接下来我们来演示一下非堆内存溢出,我们继续沿用上方代码。
非堆内存主要是MataSpace,那么我们如何构建一个非堆内存溢出呢?
我们知道MataSpace主要存一些class,filed,method等这些东西。
因此我们继续创建一个List集合,不断的往集合里面塞class。只要List不被回收,那么它里面的class也不会被回收。不停的往里面加之后,就会造成溢出。也就是我们的MataSpace溢出了。
如何来动态生成一些class呢?其实是有很多工具的,比如说:asm
引入asm工具包
这里我们引入asm jar包。
<dependency>
<groupId>asm</groupId>
<artifactId>asm</artifactId>
<version>3.3.1</version>
</dependency>
动态生成类文件
还需要创建动态生成的类文件,这里我们就不做扩展介绍,有兴趣的小伙伴可以自行到网上查阅。
/**
*
* <p>Title: Metaspace</p>
* <p>Description: https://blog.csdn.net/bolg_hero/article/details/78189621
* 继承ClassLoader是为了方便调用defineClass方法,因为该方法的定义为protected</p>
* @author Coder编程
* @date 2020年3月29日
*/
public class Metaspace extends ClassLoader {
public static List<Class<?>> createClasses() {
// 类持有
List<Class<?>> classes = new ArrayList<Class<?>>();
// 循环1000w次生成1000w个不同的类。
for (int i = 0; i < 10000000; ++i) {
ClassWriter cw = new ClassWriter(0);
// 定义一个类名称为Class{i},它的访问域为public,父类为java.lang.Object,不实现任何接口
cw.visit(Opcodes.V1_1, Opcodes.ACC_PUBLIC, "Class" + i, null,
"java/lang/Object", null);
// 定义构造函数<init>方法
MethodVisitor mw = cw.visitMethod(Opcodes.ACC_PUBLIC, "<init>",
"()V", null, null);
// 第一个指令为加载this
mw.visitVarInsn(Opcodes.ALOAD, 0);
// 第二个指令为调用父类Object的构造函数
mw.visitMethodInsn(Opcodes.INVOKESPECIAL, "java/lang/Object",
"<init>", "()V");
// 第三条指令为return
mw.visitInsn(Opcodes.RETURN);
mw.visitMaxs(1, 1);
mw.visitEnd();
Metaspace test = new Metaspace();
byte[] code = cw.toByteArray();
// 定义类
Class<?> exampleClass = test.defineClass("Class" + i, code, 0, code.length);
classes.add(exampleClass);
}
return classes;
}
}
创建Controller
接下来我们再原Controller新增一个方法nonheap
/**
*
* <p>Title: MemoryController</p>
* <p>Description: </p>
* @author Coder编程
* @date 2020年3月29日
*/
@RestController
public class MemoryController {
private List<User> userList = new ArrayList<User>();
private List<Class<?>> classList = new ArrayList<Class<?>>();
/**
* -Xmx32M -Xms32M
* */
@GetMapping("/heap")
public String heap() {
int i=0;
while(true) {
userList.add(new User(i++, UUID.randomUUID().toString()));
}
}
/**
* -XX:MetaspaceSize=32M -XX:MaxMetaspaceSize=32M
* */
@GetMapping("/nonheap")
public String nonheap() {
while(true) {
classList.addAll(Metaspace.createClasses());
}
}
}
访问测试
这里我们同样在启动的时候也要设置Mataspace的值大小。
-XX:MetaspaceSize=32M -XX:MaxMetaspaceSize=32M

接着我们在浏览器中访问地址:localhost:8080/nonheap
以上我们就完成了对堆内存溢出以及非堆内存溢出的演示。
小插曲
在测试非堆内存溢出的时候,出现了另外一个错误。
java.lang.IncompatibleClassChangeError: Found interface org.objectweb.asm.MethodVisitor, but class was expected
这个异常另外写在java.lang.IncompatibleClassChangeError,小伙伴如果有遇到,可尝试一下是否能够解决
如何查看线上堆内存溢出以及非堆内存溢出
我们主要查看线上的内存映像文件来查看到底是哪里发生了内存溢出。
发生内存溢出的主要原因:
1.内存发生泄漏
2.内存分配不足
假如发生内存泄漏的话,我们就需要找到是哪个地方发生了内存泄漏,一直占用内存没有释放。
下面我们来看一下如何来导出我们的内存映像文件。
主要有两种方式。
1.内存溢出自动导出
-XX:+HeapDumpOnOutOfMemoryError
-XX:HeapDumpPath=./
第一个参数表示:当发生内存溢出的时候,将内存溢出文件Dump出来。
第二个参数表示:Dump出来的文件存放的目录。
2.使用jmap命令手动导出
如果我们使用第一种命令,在发送内存溢出的时候再去导出,可能就有点晚了。我们可以等程序运行起来一段时间后,就可以使用jmap命令导出来进行分析。
演示内存溢出自动导出
我们需要用到两个命令参数。
-XX:+HeapDumpOnOutOfMemoryError
-XX:HeapDumpPath=./

我们接着运行项目,访问:localhost:8080/heap
查看一下打印结果。

可以看到,当发生了内存溢出后。输出了一个java_pid3972.hprof的文件。
在当前项目的当前文件中,我们就可以找到该文件。
演示jmap命令
option:-heap,-clstats,-dump:,-F


参数都是什么意思呢?
live:只导出存活的对象,如果没有指定,则全部导出
format:导出文件的格式
file:导入的文件
我们刚才的程序还没有关闭,我们来看下程序的pid是多少。
输入:jps -l

我们将其文件导入到桌面中来,输入命令
jmap -dump:format=b,file=heap.hprof 3972
最后的3972是程序的pid。最后可以看到导出完毕。

还有其他的命令参数,小伙伴们可以去官网jmap指令查看如何使用。这里就不做过多介绍。
下一章节我们将通过命令实战定位JVM发生死循环、死锁问题。
推荐
文末
文章收录至
Github: https://github.com/CoderMerlin/coder-programming
Gitee: https://gitee.com/573059382/coder-programming
欢迎关注并star~

[JVM教程与调优] 了解JVM 堆内存溢出以及非堆内存溢出的更多相关文章
- [JVM教程与调优] 什么是JVM运行时参数?
我们接着上一章节[JVM教程与调优] JVM都有哪些参数类型?的内容继续讲解,这章我们来介绍一下:如何查看JVM运行时参数.这一点十分重要,因为我们在进行JVM参数调优的时候,我们首先得知道目前系统运 ...
- [JVM教程与调优] JVM都有哪些参数类型?
JDK本身是提供了一些监控工具,有一些是命令行,也有图形界面.本次介绍命令行如何进行监控. 命令行是非常重要的,因为在我们生产环境基本上是没有图形界面的,完全是通过命令行. 主要内容: JVM的参数类 ...
- Java系列笔记(4) - JVM监控与调优
目录 参数设置收集器搭配启动内存分配监控工具和方法调优方法调优实例 光说不练假把式,学习Java GC机制的目的是为了实用,也就是为了在JVM出现问题时分析原因并解决之.通过学习,我觉得JVM ...
- JVM监控与调优
目录 参数设置收集器搭配启动内存分配监控工具和方法调优方法调优实例 转:http://www.cnblogs.com/zhguang/p/java-jvm-gc.html光说不练假把式,学习J ...
- [java] JVM监控与调优
原文出处:http://www.cnblogs.com/zhguang/p/java-jvm-gc.html 光说不练假把式,学习Java GC机制的目的是为了实用,也就是为了在JVM出现问题时分 ...
- jvm原理及调优
一.java内存管理及垃圾回收 jvm内存组成结构 jvm栈由堆.栈.本地方法栈.方法区等部分组成,结构图如下所示: (1)堆 所有通过new创建的对象的内存都在堆中分配,堆的大小可以通过-Xmx和- ...
- Spark性能调优之JVM调优
Spark性能调优之JVM调优 通过一张图让你明白以下四个问题 1.JVM GC机制,堆内存的组成 2.Spark的调优为什么会和JVM的调 ...
- Tomcat性能调优-JVM监控与调优
参数设置 在Java虚拟机的参数中,有3种表示方法用"ps -ef |grep "java"命令,可以得到当前Java进程的所有启动参数和配置参数: 标准参数(-),所有 ...
- JVM监控和调优常用命令工具总结
JVM监控和调优 在Java应用和服务出现莫名的卡顿.CPU飙升等问题时总是要分析一下对应进程的JVM状态以定位问题和解决问题并作出相应的优化,在这过程中Java自带的一些状态监控命令和图形化工具就非 ...
随机推荐
- 达拉草201771010105《面向对象程序设计(java)》第三周学习总结
达拉草201771010105«面向对象程序设计(java)»第三周学习总结 第一部分:实验部分 1.实验目的与要求 (1)进一步掌握Eclipse集成开发环境下java程序开发基本步骤: (2)熟 ...
- linux入门系列17--邮件系统之Postfix和Dovecot
前文演示了通过Samba和NFS实现文件共享,本篇演示使用Postfix和Dovecot在局域网实现电子邮件收发系统. 电子邮件系统是我们日常生活和工作中非常重要的一个网络服务,在windows下收发 ...
- 如何用Postman做接口自动化测试
目录 前言 什么是自动化测试 自动测试测试分类 为什么需要自动化测试 Postman自动化测试演示 1.新建集合 2.新建接口 3.填写自动化测试脚本 4.录入所有接口 5.执行自动化测试 前言 什么 ...
- NLP(二十二)利用ALBERT实现文本二分类
在文章NLP(二十)利用BERT实现文本二分类中,笔者介绍了如何使用BERT来实现文本二分类功能,以判别是否属于出访类事件为例子.但是呢,利用BERT在做模型预测的时候存在预测时间较长的问题.因此 ...
- 7-2 jmu-python-九九乘法表(矩形) (10 分)
本题目要求输出如下图所示的九九乘法表 注:乘积要求做格式控制,占4个位置的宽度 输入样例: 无 输出样例: 1*1=1 1*2=2 1*3=3 1*4=4 1*5=5 1*6=6 1*7=7 1*8= ...
- 搭建flutter开发
最近入坑flutter,dart还没开始学,搭环境就干了我一天半,不容易,记录一下, 我们先立个目标,这是我已经配好的,我是真的有强迫症,需要打四个对勾,真的不容易,我们一个一先说一下每一个都代表什么 ...
- Layabox UI 笔记
1.UI List 官方文档是 https://ldc2.layabox.com/doc/?language=zh&nav=zh-js-3-3-7 通常用List的时候会出现滚动条按钮比例拉 ...
- 无损卡尔曼滤波UKF(3)-预测-生成Sigma点
无损卡尔曼滤波UKF(3)-预测-生成Sigma点 1 选择创建Sigma点 A 根据 已知上一个时间戳迭代出来的 后验状态 x_{k|k} 和后验协方差矩阵 P_{k|k} 他们代表当前状态的分布. ...
- 教妹学Java:Spring 入门篇
你好呀,我是沉默王二,一个和黄家驹一样身高,刘德华一样颜值的程序员(管你信不信呢).从两位偶像的年纪上,你就可以断定我的码龄至少在 10 年以上,但实话实说,我一直坚信自己只有 18 岁,因为我有一颗 ...
- Vue2.0 【第一季】第2节 v-if v-else v-show 指令
目录 Vue2.0 [第一季]第2节 v-if v-else v-show 指令 第二节 v-if v-else v-show 指令 2.1 v-if指令.v-else指令: 2.2 v-show的使 ...