[JVM教程与调优] 了解JVM 堆内存溢出以及非堆内存溢出

在上一章中我们介绍了JVM运行时参数以及jstat指令相关内容:[JVM教程与调优] 什么是JVM运行时参数?。下面我们来介绍一下jmap+MAT内存溢出。
首先我们来介绍一下下JVM的内存结构。
JVM内存结构介绍

从图中我们可以看到,JVM的内存结构分为两大块。一块叫堆区,一块叫非堆区。
堆区又分为两大块,一块Young,一块叫Old。Young区又分为Survivor区和Eden区。Survivor区我们又分为S0与S1。可以结合下图进行理解

非堆区呢,是属于我们操作系统的本地内存。它是独立于我们堆区之外的。它在JDK1.8里面有一个新的名字,叫Metaspace。Metaspace里面还包含几个块,其中有一块就是CCS,还有一块是CodeCache。当然,在我们的Metaspace中还包含很多其他块,这里就不做扩展了。
接下来,我们来通过实战,来更加深入的理解JVM结构,以及出现JVM内存溢出的原因。
实战理解
我们通过spring.start快速来生成一个springboot项目。

如图,我们快速的创建一个springboot项目,并将其下载下来。
这里我使用Eclipse,小伙伴们也可以使用IDEA或者其他开发工具也是可以的。
这里我们使用的是SpringBoot工程,如果有的小伙伴对SpringBoot还不太熟悉的,可以上网找一些教程先学习了解一下。
堆内存溢出演示
那么我们如何来构建一个堆内存溢出呢?其实很简单,我们只要定义一个List对象,然后通过一个循环不停的往List里面塞对象。因为只要Controller不被回收,那么它里面的成员变量也是不会被回收的。这样就会导致List里面的对象越来越多,占用的内存越来越大,最后就把我们的内存撑爆了。
创建User对象
这里我们先创建一个User对象。
/**
*
* <p>Title: User</p>
* <p>Description: </p>
* @author Coder编程
* @date 2020年3月29日
*/
@Data
@AllArgsConstructor
@NoArgsConstructor
public class User {
private int id;
private String name;
}
这里面@Data、@AllArgsConstructor、@NoArgsConstructor用的是lombok注解。不会使用的小伙伴,可以在网上查找相关资料学习一下。
创建Controller对象
接下来我们来创建一个Controller来不停的往List集合中塞对象。
/**
*
* <p>Title: MemoryController</p>
* <p>Description: </p>
* @author Coder编程
* @date 2020年3月29日
*/
@RestController
public class MemoryController {
private List<User> userList = new ArrayList<User>();
/**
* -Xmx32M -Xms32M
* */
@GetMapping("/heap")
public String heap() {
int i=0;
while(true) {
userList.add(new User(i++, UUID.randomUUID().toString()));
}
}
}
为了更快达到我们的效果,我们来设置两个参数。
-Xmx32M -Xms32M
一个最大内存,一个最小内存。我们的堆就只有32M,这样就很容易溢出。
访问测试
启动时候设置内存参数。


记得选中我们的Arguments,在JVM 参数中,将我们的值设置进去。最后点击Run运行起来。
然后我们在浏览器中请求:
http://localhost:8080/heap
我们再观察控制台打印:

通过打印结果,我们可以看到堆内存溢出了。
注意:
这里我们测试的时候可以很简单的看出在哪里出现的问题,但是在实际生产环境中并没有那么简单,因此我们需要借助工具,来定位这些问题。后续我们来介绍一下。
非堆内存溢出演示
接下来我们来演示一下非堆内存溢出,我们继续沿用上方代码。
非堆内存主要是MataSpace,那么我们如何构建一个非堆内存溢出呢?
我们知道MataSpace主要存一些class,filed,method等这些东西。
因此我们继续创建一个List集合,不断的往集合里面塞class。只要List不被回收,那么它里面的class也不会被回收。不停的往里面加之后,就会造成溢出。也就是我们的MataSpace溢出了。
如何来动态生成一些class呢?其实是有很多工具的,比如说:asm
引入asm工具包
这里我们引入asm jar包。
<dependency>
<groupId>asm</groupId>
<artifactId>asm</artifactId>
<version>3.3.1</version>
</dependency>
动态生成类文件
还需要创建动态生成的类文件,这里我们就不做扩展介绍,有兴趣的小伙伴可以自行到网上查阅。
/**
*
* <p>Title: Metaspace</p>
* <p>Description: https://blog.csdn.net/bolg_hero/article/details/78189621
* 继承ClassLoader是为了方便调用defineClass方法,因为该方法的定义为protected</p>
* @author Coder编程
* @date 2020年3月29日
*/
public class Metaspace extends ClassLoader {
public static List<Class<?>> createClasses() {
// 类持有
List<Class<?>> classes = new ArrayList<Class<?>>();
// 循环1000w次生成1000w个不同的类。
for (int i = 0; i < 10000000; ++i) {
ClassWriter cw = new ClassWriter(0);
// 定义一个类名称为Class{i},它的访问域为public,父类为java.lang.Object,不实现任何接口
cw.visit(Opcodes.V1_1, Opcodes.ACC_PUBLIC, "Class" + i, null,
"java/lang/Object", null);
// 定义构造函数<init>方法
MethodVisitor mw = cw.visitMethod(Opcodes.ACC_PUBLIC, "<init>",
"()V", null, null);
// 第一个指令为加载this
mw.visitVarInsn(Opcodes.ALOAD, 0);
// 第二个指令为调用父类Object的构造函数
mw.visitMethodInsn(Opcodes.INVOKESPECIAL, "java/lang/Object",
"<init>", "()V");
// 第三条指令为return
mw.visitInsn(Opcodes.RETURN);
mw.visitMaxs(1, 1);
mw.visitEnd();
Metaspace test = new Metaspace();
byte[] code = cw.toByteArray();
// 定义类
Class<?> exampleClass = test.defineClass("Class" + i, code, 0, code.length);
classes.add(exampleClass);
}
return classes;
}
}
创建Controller
接下来我们再原Controller新增一个方法nonheap
/**
*
* <p>Title: MemoryController</p>
* <p>Description: </p>
* @author Coder编程
* @date 2020年3月29日
*/
@RestController
public class MemoryController {
private List<User> userList = new ArrayList<User>();
private List<Class<?>> classList = new ArrayList<Class<?>>();
/**
* -Xmx32M -Xms32M
* */
@GetMapping("/heap")
public String heap() {
int i=0;
while(true) {
userList.add(new User(i++, UUID.randomUUID().toString()));
}
}
/**
* -XX:MetaspaceSize=32M -XX:MaxMetaspaceSize=32M
* */
@GetMapping("/nonheap")
public String nonheap() {
while(true) {
classList.addAll(Metaspace.createClasses());
}
}
}
访问测试
这里我们同样在启动的时候也要设置Mataspace的值大小。
-XX:MetaspaceSize=32M -XX:MaxMetaspaceSize=32M

接着我们在浏览器中访问地址:localhost:8080/nonheap
以上我们就完成了对堆内存溢出以及非堆内存溢出的演示。
小插曲
在测试非堆内存溢出的时候,出现了另外一个错误。
java.lang.IncompatibleClassChangeError: Found interface org.objectweb.asm.MethodVisitor, but class was expected
这个异常另外写在java.lang.IncompatibleClassChangeError,小伙伴如果有遇到,可尝试一下是否能够解决
如何查看线上堆内存溢出以及非堆内存溢出
我们主要查看线上的内存映像文件来查看到底是哪里发生了内存溢出。
发生内存溢出的主要原因:
1.内存发生泄漏
2.内存分配不足
假如发生内存泄漏的话,我们就需要找到是哪个地方发生了内存泄漏,一直占用内存没有释放。
下面我们来看一下如何来导出我们的内存映像文件。
主要有两种方式。
1.内存溢出自动导出
-XX:+HeapDumpOnOutOfMemoryError
-XX:HeapDumpPath=./
第一个参数表示:当发生内存溢出的时候,将内存溢出文件Dump出来。
第二个参数表示:Dump出来的文件存放的目录。
2.使用jmap命令手动导出
如果我们使用第一种命令,在发送内存溢出的时候再去导出,可能就有点晚了。我们可以等程序运行起来一段时间后,就可以使用jmap命令导出来进行分析。
演示内存溢出自动导出
我们需要用到两个命令参数。
-XX:+HeapDumpOnOutOfMemoryError
-XX:HeapDumpPath=./

我们接着运行项目,访问:localhost:8080/heap
查看一下打印结果。

可以看到,当发生了内存溢出后。输出了一个java_pid3972.hprof的文件。
在当前项目的当前文件中,我们就可以找到该文件。
演示jmap命令
option:-heap,-clstats,-dump:,-F


参数都是什么意思呢?
live:只导出存活的对象,如果没有指定,则全部导出
format:导出文件的格式
file:导入的文件
我们刚才的程序还没有关闭,我们来看下程序的pid是多少。
输入:jps -l

我们将其文件导入到桌面中来,输入命令
jmap -dump:format=b,file=heap.hprof 3972
最后的3972是程序的pid。最后可以看到导出完毕。

还有其他的命令参数,小伙伴们可以去官网jmap指令查看如何使用。这里就不做过多介绍。
下一章节我们将通过命令实战定位JVM发生死循环、死锁问题。
推荐
文末
文章收录至
Github: https://github.com/CoderMerlin/coder-programming
Gitee: https://gitee.com/573059382/coder-programming
欢迎关注并star~

[JVM教程与调优] 了解JVM 堆内存溢出以及非堆内存溢出的更多相关文章
- [JVM教程与调优] 什么是JVM运行时参数?
我们接着上一章节[JVM教程与调优] JVM都有哪些参数类型?的内容继续讲解,这章我们来介绍一下:如何查看JVM运行时参数.这一点十分重要,因为我们在进行JVM参数调优的时候,我们首先得知道目前系统运 ...
- [JVM教程与调优] JVM都有哪些参数类型?
JDK本身是提供了一些监控工具,有一些是命令行,也有图形界面.本次介绍命令行如何进行监控. 命令行是非常重要的,因为在我们生产环境基本上是没有图形界面的,完全是通过命令行. 主要内容: JVM的参数类 ...
- Java系列笔记(4) - JVM监控与调优
目录 参数设置收集器搭配启动内存分配监控工具和方法调优方法调优实例 光说不练假把式,学习Java GC机制的目的是为了实用,也就是为了在JVM出现问题时分析原因并解决之.通过学习,我觉得JVM ...
- JVM监控与调优
目录 参数设置收集器搭配启动内存分配监控工具和方法调优方法调优实例 转:http://www.cnblogs.com/zhguang/p/java-jvm-gc.html光说不练假把式,学习J ...
- [java] JVM监控与调优
原文出处:http://www.cnblogs.com/zhguang/p/java-jvm-gc.html 光说不练假把式,学习Java GC机制的目的是为了实用,也就是为了在JVM出现问题时分 ...
- jvm原理及调优
一.java内存管理及垃圾回收 jvm内存组成结构 jvm栈由堆.栈.本地方法栈.方法区等部分组成,结构图如下所示: (1)堆 所有通过new创建的对象的内存都在堆中分配,堆的大小可以通过-Xmx和- ...
- Spark性能调优之JVM调优
Spark性能调优之JVM调优 通过一张图让你明白以下四个问题 1.JVM GC机制,堆内存的组成 2.Spark的调优为什么会和JVM的调 ...
- Tomcat性能调优-JVM监控与调优
参数设置 在Java虚拟机的参数中,有3种表示方法用"ps -ef |grep "java"命令,可以得到当前Java进程的所有启动参数和配置参数: 标准参数(-),所有 ...
- JVM监控和调优常用命令工具总结
JVM监控和调优 在Java应用和服务出现莫名的卡顿.CPU飙升等问题时总是要分析一下对应进程的JVM状态以定位问题和解决问题并作出相应的优化,在这过程中Java自带的一些状态监控命令和图形化工具就非 ...
随机推荐
- Spring aop(1)--- 寻找切面和代理对象执行流程源码分析
1.基于注解,首先我们是通过@EnableAspectJAutoProxy()这个注解开起AOP功能,这个注解会导入AspectJAutoProxyRegistrar组件从而将AnnotationAw ...
- Python——6切片
*/ * Copyright (c) 2016,烟台大学计算机与控制工程学院 * All rights reserved. * 文件名:text.cpp * 作者:常轩 * 微信公众号:Worldhe ...
- 数据库及MySQL概述
#什么是数据 用来描述事物的符号记录.可以是数字.文字.图形等,有多种形式,经过数字化之后存入计算机 #什么是数据库 数据库(Database)就是一个用来存放数据库的仓库,是按照一定的数据结构来组织 ...
- 【Java】Map总结和源码注释
前言 Map为一个Java中一个重要的数据结构,主要表示<key, value>的映射关系对.本文包括了相关Map数据结构的总结和源码的阅读注释. HashMap 初始化,可以选择第二个初 ...
- MySQL基础篇(05):逻辑架构图解和InnoDB存储引擎详解
本文源码:GitHub·点这里 || GitEE·点这里 一.MySQL逻辑架构 1.逻辑架构图 基于下面的逻辑架构图,可以大致熟悉MySQL各个架构组件之间的协同工作关系. 很经典的C/S架构风格, ...
- Swift--struct与class的区别(汇编角度底层分析)
概述 相对Objective-C, Swift使用结构体Struct的比例大大增加了,其中Int, Bool,以及String,Array等底层全部使用Struct来定义!在Swift中结构体不仅可以 ...
- C++泛化双向链表
泛型双向链表 双向链表(doublyLinkedList.h) /******************************************************************* ...
- jquery 的animate 的transform
$(function(){ var t = 1000; $("#id").animate( {borderSpacing:180}, //180 指旋转度数 { step: fun ...
- springmvc 的@ResponseBody 如何使用JSONP?
JSONP解释 在解释JSONP之前,我们需要了解下”同源策略“这个概念,这对理解跨域有帮助.基于安全的原因,浏览器是存在同源策略机制的,同源策略阻止从一个源加载的文档或脚本获取或设置另一个源加载额文 ...
- arm 添加 ftp server 之 bftpd
本来想装vsftp 结果装上以后执行报错 Segmentation fault , 换到几个 其它的小型ftp server 软件 ,试了 Stupid-FTPd,不能用. bftpd 可以使用,Ti ...