0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

如何解决内存溢出

科技绿洲 来源:了不起 作者:了不起 2023-09-25 10:54 次阅读

内存溢出(Out Of Memory,简称OOM)是指应用系统中存在无法回收的内存或使用的内存过多,最终使得程序运行要用到的内存大于能提供的最大内存。此时程序就运行不了,系统会提示内存溢出,有时候会自动关闭软件,重启电脑或者软件后释放掉一部分内存又可以正常运行该软件,而由系统配置、数据流、用户代码等原因而导致的内存溢出错误,即使用户重新执行任务依然无法避免

其实很简单,在 Java 中,那就是 Out Of Memory,导致了不合理的 GC ,那么如何去定位这个内存溢出的呢?实际上如果是大公司,那么会有专业的运维人员去定位哪些程序导致了内存溢出,但是如果要是没有专业的运维人员,那么你自己就得学会怎么去定位这个内存溢出了。

如何定位内存溢出

一、定位占用CPU最高的服务 1、先找到cpu占用比较高的进程:top``-c 进去后按Shift+P

一般异常的进程cpu的占用会很高,记录下这进程的PID

2、查看指定进程cpu情况:top -cp PID

查看此进程占用cpu最高的线程,记录下线程的ppid也可以将相关信息保存下来:top -Hp PID -o %CPU -n 1 >cpu.txt到此,我们就找到的最占用cpu的进程以及相关线程。

3.如果你已经知道是你们的 Java 程序导致了内存溢出,那么我们就得学会分析日志,一般在 Out Of Memory 的上方,我们都会有各种日志的输出,来标志现在这个时间点,我们的程序执行了什么操作,导致了我们的这个内存溢出,分析到这里,就轮到看代码了。

检查的内容大致都有哪些地方呢?

在一个项目中,使用两个数据库连接,其中专用于发送短信的数据库连接使用 DBCP 连接池管理,用户为不将短信发出,有意将数据库连接用户名改错,使得日志中有许多数据库连接异常的日志,一段时间后,就出现 OutOfMemory 错误。经分析,这是由于 DBCP 连接池 BUG 引起的,数据库连接不上后,没有将连接释放,最终使得D BCPOutOfMemory 错误。

上面这是一个简单的例子,比如还有其他的,代码中是否有死循环或递归调用。是否有大循环重复产生新对象实体。检查对数据库查询中,是否有一次获得全部数据的查询。一般来说,如果一次取十万条记录到内存,就可能引起内存溢出。这个问题比较隐蔽,在上线前,数据库中数据较少,不容易出问题,上线后,数据库中数据多了,一次查询就有可能引起内存溢出。因此对于数据库查询尽量采用分页的方式查询。

检查ListMAP等集合对象是否有使用完后,未清除的问题。ListMAP等集合对象会始终存有对对象的引用,使得这些对象不能被GC回收。

比如我们这次内存溢出,就是因为一个很简答的导入功能,因为服务器给服务拆分的内存只有2G,而程序也没有专门的去处理,实施导入数据的时候,直接把100w的空数据从Excel中直接导入了,结果,直接导致了内存溢出。那么我们应该怎么去处理这个呢?

其实我们的比较简单,就是直接限定了文件的大小,因为Excel 虽然很大,但是有数据量的就那么几百行,100w行,都是空行数据,还都识别了,所以处理方式就那么几种,限制文件大小,限制读取数据的时候不读空行,因为毕竟内存大小是已经不允许我们做修改了,只能通过这个代码业务层面来处理这个了。

如何解决内存溢出呢?

内存溢出的解决方案:

第一步,修改JVM启动参数,直接增加内存。(-Xms-Xmx参数一定不要忘记加。)

第二步,检查错误日志,查看OutOfMemory错误前是否有其它异常或错误。

第三步,对代码进行走查和分析,找出可能发生内存溢出的位置。

重点排查以下几点:

1.检查对数据库查询中,是否有一次获得全部数据的查询。一般来说,如果一次取十万条记录到内存,就可能引起内存溢出。这个问题比较隐蔽,在上线前,数据库中数据较少,不容易出问题,上线后,数据库中数据多了,一次查询就有可能引起内存溢出。因此对于数据库查询尽量采用分页的方式查询。

2.检查代码中是否有死循环或递归调用。

3.检查是否有大循环重复产生新对象实体。

4.检查ListMAP等集合对象是否有使用完后,未清除的问题。ListMAP等集合对象会始终存有对对象的引用,使得这些对象不能被GC回收。

第四步,使用内存查看工具动态查看内存使用情况

图片

一般的,使用的工具有很多,MAT(Memory Analyzer Tool) 这个工具是一个比较好用的分析内存的工具,还有 jmeter 这个压力测试工具,可对特定接口进行压测,分析tps、响应时间、CPU、内存等性能指标。

JConsoleJVisualVM jdk 自带可视化工具,可监控CPU、内存、线程等状况。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • cpu
    cpu
    +关注

    关注

    68

    文章

    10824

    浏览量

    211089
  • 内存
    +关注

    关注

    8

    文章

    2996

    浏览量

    73868
  • 程序
    +关注

    关注

    116

    文章

    3773

    浏览量

    80830
  • 数据流
    +关注

    关注

    0

    文章

    119

    浏览量

    14329
  • 线程
    +关注

    关注

    0

    文章

    504

    浏览量

    19646
收藏 人收藏

    评论

    相关推荐

    内存溢出的原因以及解决方法

    内存溢出 ,是指程序在申请内存时,没有足够的内存空间供其使用,出现out of memory;比如申请了一个integer,但给它存了long才能存下的数,那就是
    的头像 发表于 06-01 11:31 2.4w次阅读
    <b class='flag-5'>内存</b><b class='flag-5'>溢出</b>的原因以及解决方法

    ESP32C3蓝牙meshprovisioner出现内存溢出问题如何解决?

    E (226178673) BLE_MESH: bt_mesh_alloc_buf, Out of memory E (226178683) BLE_MESH: sdu_recv, Out of memory 蓝牙meshprovisioner 出现内存溢出问题,该如
    发表于 06-07 07:59

    tomcat JVM的内存溢出

    常见的内存溢出有以下两种:java.lang.OutOfMemoryError: PermGen spacejava.lang.OutOfMemoryError: Java heap space
    发表于 07-15 08:18

    linux的Tomcat内存溢出怎么解决

    Tomcat本身不能直接在计算机上运行,需要依赖于操作系统和一个JAVA虚拟机。JAVA程序启动时JVM会分配一个初始内存和最大内存给程序。当程序需要的内存超出内存的最大值时虚拟机就会
    发表于 07-16 07:38

    内存泄露和内存溢出是什么意思

    面试题目汇总最重要:简单又重点突出的自我介绍!1、内存泄露和内存溢出是什么意思2、static的使用3、break 和continue的区别4、指针函数和函数指针的区别5、数组和链表的区别
    发表于 12-20 07:47

    java内存溢出排查方法解析

     内存溢出(out of memory),通俗理解就是内存不够,通常在运行大型软件或游戏时,软件或游戏所需要的内存远远超出了你主机内安装的内存
    发表于 11-28 13:57 6736次阅读

    单片机的存储器内存溢出的问题应该如何解

    今天同事遇到一个内存溢出的问题,在帮忙解决过程中发现自己对这些东西还没有彻底弄清楚,就搜集了一些资料整理一下, 受益匪浅。以前也记过笔记,但是时间一长又忘了,还是放在这里好了。
    发表于 09-11 17:24 8次下载
    单片机的存储器<b class='flag-5'>内存</b><b class='flag-5'>溢出</b>的问题应该如<b class='flag-5'>何解</b>决

    内存溢出内存泄露的区别_内存溢出的原因以及解决方法

    内存溢出内存泄露的区别是什么?内存溢出怎么解决?内存溢出
    发表于 06-01 10:27 2890次阅读

    三分钟搞定MCU内存溢出

    今天我来讲一讲MCU开发中的一个棘手问题——内存溢出,希望能帮到遇到该问题的同学们。
    的头像 发表于 03-26 10:07 1822次阅读

    C语言的哪些函数会导致内存溢出?如何改进?

    这几个函数,要说跟内存溢出没有关系的,只有strcmp。
    的头像 发表于 08-01 17:06 1322次阅读
    C语言的哪些函数会导致<b class='flag-5'>内存</b><b class='flag-5'>溢出</b>?如何改进?

    java内存溢出的几种原因和解决办法

    Java是一种使用垃圾回收机制的编程语言,由于自动内存管理机制的存在,Java程序中发生内存溢出(Out of Memory)错误的情况相对较少。然而,虽然Java垃圾回收器负责释放无用的对象占用
    的头像 发表于 11-23 14:44 6034次阅读

    java内存溢出排查方法

    Java内存溢出(Memory overflow)是指Java虚拟机(JVM)中的堆内存无法满足对象分配的需求,导致程序抛出OutOfMemoryError异常。内存
    的头像 发表于 11-23 14:46 3101次阅读

    jvm内存溢出故障排查

    JVM内存溢出是常见且令人头疼的问题,特别是在运行大型Java应用程序或长时间运行的应用程序时。当JVM分配给应用程序的内存不足以处理应用程序所需的数据时,就会发生内存
    的头像 发表于 12-05 11:04 769次阅读

    jvm内存溢出该如何定位解决

    在Java应用程序中,JVM(Java虚拟机)内存溢出是指Java应用程序试图分配的内存超过了JVM所允许的最大内存大小,导致程序无法正常执行。内存
    的头像 发表于 12-05 11:05 1286次阅读

    内存溢出内存泄漏:定义、区别与解决方案

    内存溢出内存泄漏:定义、区别与解决方案  内存溢出内存泄漏是计算机科学中常见的问题,在开发和
    的头像 发表于 12-19 14:10 2451次阅读