Java服务,内存OOM问题如何快速定位?

简介: 确认是不是内存本身就分配过小;找到最耗内存的对象;确认是否是资源耗尽。

最近有朋友在知识星球提问:
沈老师,有一个Java服务出现了OOM(Out Of Memory)问题,定位了好久不得其法,请问有什么好的思路么?
OOM的问题,印象中之前写过,这里再总结一些相对通用的方案,希望能帮助到Java技术栈的同学。

某Java服务(假设PID=10765)出现了OOM,最常见的原因为:

  • 有可能是内存分配确实过小,而正常业务使用了大量内存
  • 某一个对象被频繁申请,却没有释放,内存不断泄漏,导致内存耗尽
  • 某一个资源被频繁申请,系统资源耗尽,例如:不断创建线程,不断发起网络连接
画外音:无非“本身资源不够”“申请资源太多”“资源耗尽”几个原因。
 
更具体的,可以使用以下工具逐一排查。


一、确认是不是内存本身就分配过小 方法: jmap -heap 10765
image.png

如上图,可以查看新生代,老生代堆内存的分配大小以及使用情况,看是否本身分配过小。   二、找到最耗内存的对象 方法: jmap -histo:live 10765 | more
image.png

如上图,输入命令后,会以表格的形式显示存活对象的信息,并按照所占内存大小排序:
  • 实例数
  • 所占内存大小
  • 类名
是不是很直观? 对于实例数较多,占用内存大小较多的实例/类,相关的代码就要针对性review了。   上图中占内存最多的对象是RingBufferLogEvent,共占用内存18M,属于正常使用范围。


如果发现某类对象占用内存很大(例如几个G),很可能是类对象创建太多,且一直未释放。 例如:
  • 申请完资源后,未调用close()或dispose()释放资源
  • 消费者消费速度慢(或停止消费了),而生产者不断往队列中投递任务,导致队列中任务累积过多
画外音:线上执行该命令会强制执行一次fgc。另外还可以dump内存进行分析。

三、确认是否是资源耗尽 工具:
  • pstree
  • netstat
查看进程创建的线程数,以及网络连接数,如果资源耗尽,也可能出现OOM。   这里介绍另一种方法,通过
  • /proc/${PID}/fd
  • /proc/${PID}/task
可以分别查看句柄详情和线程数。   例如,某一台线上服务器的sshd进程PID是9339,查看
  • ll /proc/9339/fd
  • ll /proc/9339/task

image.png

如上图,sshd共占用了四个句柄

  • 0 -> 标准输入
  • 1 -> 标准输出
  • 2 -> 标准错误输出
  • 3 -> socket(容易想到是监听端口)
  sshd只有一个主线程PID为9339,并没有多线程。


所以,只要
  • ll /proc/${PID}/fd | wc -l
  • ll /proc/${PID}/task | wc -l (效果等同pstree -p | wc -l)
就能知道进程打开的句柄数和线程数。


希望这1分钟能帮到这位星球水友。

你遇到过奇葩的OOM问题么?是怎么定位的?欢迎分享。

本文转自“架构师之路”公众号,58沈剑提供。

目录
相关文章
|
6月前
|
Java 大数据 Go
从混沌到秩序:Java共享内存模型如何通过显式约束驯服并发?
并发编程旨在混乱中建立秩序。本文对比Java共享内存模型与Golang消息传递模型,剖析显式同步与隐式因果的哲学差异,揭示happens-before等机制如何保障内存可见性与数据一致性,展现两大范式的深层分野。(238字)
196 4
|
6月前
|
存储 缓存 Java
【深入浅出】揭秘Java内存模型(JMM):并发编程的基石
本文深入解析Java内存模型(JMM),揭示synchronized与volatile的底层原理,剖析主内存与工作内存、可见性、有序性等核心概念,助你理解并发编程三大难题及Happens-Before、内存屏障等解决方案,掌握多线程编程基石。
|
7月前
|
安全 Java 应用服务中间件
Spring Boot + Java 21:内存减少 60%,启动速度提高 30% — 零代码
通过调整三个JVM和Spring Boot配置开关,无需重写代码即可显著优化Java应用性能:内存减少60%,启动速度提升30%。适用于所有在JVM上运行API的生产团队,低成本实现高效能。
929 3
|
7月前
|
缓存 监控 Kubernetes
Java虚拟机内存溢出(Java Heap Space)问题处理方案
综上所述, 解决Java Heap Space溢出需从多角度综合施策; 包括但不限于配置调整、代码审查与优化以及系统设计层面改进; 同样也不能忽视运行期监控与预警设置之重要性; 及早发现潜在风险点并采取相应补救手段至关重要.
937 17
|
8月前
|
存储 监控 算法
Java垃圾回收机制(GC)与内存模型
本文主要讲述JVM的内存模型和基本调优机制。
|
Java
Java面试题:Java内存模型与并发编程知识点,解释Java中“happens-before”的关系,分析Java中的内存一致性效应(Memory Consistency Effects)及其重要性
Java面试题:Java内存模型与并发编程知识点,解释Java中“happens-before”的关系,分析Java中的内存一致性效应(Memory Consistency Effects)及其重要性
169 0
|
SQL 安全 Java
java单例——Java 内存模型之从 JMM 角度分析 DCL
java单例——Java 内存模型之从 JMM 角度分析 DCL
209 0
|
存储 算法 Java
【Android 内存优化】Java 内存模型 ( Java 虚拟机内存模型 | 线程私有区 | 共享数据区 | 内存回收算法 | 引用计数 | 可达性分析 )
【Android 内存优化】Java 内存模型 ( Java 虚拟机内存模型 | 线程私有区 | 共享数据区 | 内存回收算法 | 引用计数 | 可达性分析 )
398 0
|
存储 缓存 Java
Java高级之内存模型分析
博客出自:http://blog.csdn.net/liuxian13183,转载注明出处! All Rights Reserved ! 下文是博主感悟,请带着怀疑性的态度阅读! 需要了解基本变量所占内存大小,请移步:读书笔记-类结构的认识 Java存储空间有这么几块-来源于Java编程思想 寄存器:位于处理器内部,不受外层代码控制,由处理器自行分配-C/C++可以建议分配方式,使用句柄(包含引用类型和引用地址)来操作数据。
1164 0
|
6月前
|
JSON 网络协议 安全
【Java】(10)进程与线程的关系、Tread类;讲解基本线程安全、网络编程内容;JSON序列化与反序列化
几乎所有的操作系统都支持进程的概念,进程是处于运行过程中的程序,并且具有一定的独立功能,进程是系统进行资源分配和调度的一个独立单位一般而言,进程包含如下三个特征。独立性动态性并发性。
344 1