zoukankan      html  css  js  c++  java
  • 线上问题定位--OOM

    服务器上部署了Java服务,出现了OutOfMemoryError,问题应该如何定位?

    解决思路

    Java服务OOM,最常见的原因为:

    • 有可能是内存分配确实过小,而正常业务使用了大量内存

    • 某一个对象被频繁申请,却没有释放,内存不断泄漏,导致内存耗尽

    • 某一个资源被频繁申请,系统资源耗尽,例如:不断创建线程,不断发起网络连接

    更具体的,可以使用以下的一些工具逐一排查。

    一、查发生了OOM的进程

    工具:top

    方法:

    • 执行top -d 1 -c,每秒刷新一次,显示进程运行信息列表

    • 键入M (大写m),进程按照内存使用排序

    图示:

    二、确认是不是内存本身就分配过小

    方法:jmap -heap 2820

    如上图,可以查看新生代,老生代堆内存的分配大小以及使用情况,看是否本身分配过小。

    三、找到最耗内存的对象

    方法:jmap -histo:live 2820 | more 

    图示:

    如上图,输入命令后,会以表格的形式显示存活对象的信息,并按照所占内存大小排序:

    • 实例数

    • 所占内存大小

    • 类名

    是不是很直观?对于实例数较多,占用内存大小较多的实例/类,相关的代码就要针对性review了。

    上图中占内存最多的对象是byte,共占用内存71M,值得关注,后续再MAT中再次分析。

    四、确认是否是资源耗尽

    查看进程创建的线程数,如果资源耗尽,也可能出现OOM。

    工具:

    • ps

    方法:ps -efL 2820

    查看进程网络连接数,如果资源耗尽,也可能出现OOM。

    工具:

    • netstat

    方法:netstat -apn | grep 2820

    这里介绍另一种方法,通过

    • /proc/${PID}/fd 

    • /proc/${PID}/task 

    可以分别查看句柄详情和线程数。

    例如,某一台线上服务器的sshd进程PID是2820,查看

    • ll /proc/2820/fd 

    • ll /proc/2820/task 

     

    喜欢请微信扫描下面二维码,关注我公众号--“扯一扯技术”,做一些实战项目中的问题和解决方案分享。

  • 相关阅读:
    kotlin,短小精悍
    最近把Vue又看了下
    https://docs.spring.io/spring-framework/docs/current/reference/html/web-reactive.html#webflux-cors
    os模块——获取上层目录
    启动flask服务:flask run -h 0.0.0.0 -p 5000
    22端口和3389端口之我竟然用3389连接linux服务器,关键是我之前用22端口连接过linux!!!
    datetime 模块
    查看公网ip
    字典——删除元素
    docker端口映射
  • 原文地址:https://www.cnblogs.com/zhouqinxiong/p/10361582.html
Copyright © 2011-2022 走看看