【Java】解决程序堆内存正常,但实际内存过高的问题

简介: 最近遇到一个很头疼的问题,用Java写的工具运行几天后,内存涨到8G以上,我用jvisualvm监控发现堆内存持续稳定未出现泄漏,然后就各种搜问题,最后经过1周多时间排查处理,最后终于修复了,因此记录一下。

【Java】解决程序堆内存正常,但实际内存过高的问题


一、前言


   最近遇到一个很头疼的问题,用Java写的工具运行几天后,内存涨到8G以上,我用jvisualvm监控发现堆内存持续稳定未出现泄漏,然后就各种搜问题,最后经过1周多时间排查处理,最后终于修复了,因此记录一下。


二、问题与解决方案


   1. jni 内存泄漏问题


       由于我的Java需要调用C++语言写的模块,因此采用了jni调用,将java中的byte[]传给C++进行处理,最后返回已处理的byte[]数据,这里遇到了第一个内存泄漏问题。

// jni c++
jbyte* bytedata = env->GetByteArrayElements(data, 0);
// 对bytedata进行处理后返回
//c_decode_data(bytedata) 
jbyteArray result = env->NewByteArray(len);
env->SetByteArrayRegion(result, 0, len, bytedata);
env->ReleaseByteArrayElements(data, bytedata, 0);
return result


      上面的代码运行会产生内存泄漏,具体原因如下:


           1).  使用env->GetByteArrayElements后必须调用env->ReleaseByteArrayElements,其他GetXXX(...)也是类似。


           2).  使用env->NewByteArray生成的对象需要调用env->

DeleteLocalRef删除引用,其他NewXXX(...)也是类似。


  2. Java堆内存正常,但是实际使用内存过高


       使用pmap -x 打印内存信息时,发现有很多64MB的[anon]内存块,如下图(图片来自网络截取)。


微信截图_20220424101213.png微信截图_20220424101228.png


       引起上面的原因很多地方都说是glibc自2.11以后的版本导致的,glibc使用arena的memory pool解决多线程内存分配竞争的问题。解决方法是在启动Java程序前设置MALLOC_ARENA_MAX=1或者其他比较小的值来解决,推荐值为4。也可以通过使用tcmalloc库来规避这个问题。


   3. glibc的另一个问题


       C语言中的malloc和free在不同平台有不同的实现,在linux上由glibc实现,glibc内部维护了一个内存池,在调用free的时候内存只会归还给glibc,再由glibc决定是否归还给系统。如果想立即归还给系统可以主动调用malloc_trim(0)


三、总结


   以上就是本次解决Java内存泄漏问题学到的几个知识点,我也只是大致了解了一下,对其原理并未深入理解。大家如果遇到同样的问题时,可以尝试我介绍的方法,如果能够深入理解原理就更好了。

欢迎微信搜索"游戏测试开发"关注一起沟通交流。



相关文章
|
17天前
|
存储 Java 编译器
Java内存模型(JMM)深度解析####
本文深入探讨了Java内存模型(JMM)的工作原理,旨在帮助开发者理解多线程环境下并发编程的挑战与解决方案。通过剖析JVM如何管理线程间的数据可见性、原子性和有序性问题,本文将揭示synchronized关键字背后的机制,并介绍volatile关键字和final关键字在保证变量同步与不可变性方面的作用。同时,文章还将讨论现代Java并发工具类如java.util.concurrent包中的核心组件,以及它们如何简化高效并发程序的设计。无论你是初学者还是有经验的开发者,本文都将为你提供宝贵的见解,助你在Java并发编程领域更进一步。 ####
|
27天前
|
NoSQL 测试技术
内存程序崩溃
【10月更文挑战第13天】
130 62
|
12天前
|
缓存 算法 Java
本文聚焦于Java内存管理与调优,介绍Java内存模型、内存泄漏检测与预防、高效字符串拼接、数据结构优化及垃圾回收机制
在现代软件开发中,性能优化至关重要。本文聚焦于Java内存管理与调优,介绍Java内存模型、内存泄漏检测与预防、高效字符串拼接、数据结构优化及垃圾回收机制。通过调整垃圾回收器参数、优化堆大小与布局、使用对象池和缓存技术,开发者可显著提升应用性能和稳定性。
35 6
|
15天前
|
存储 缓存 Java
结构体和类在内存管理方面的差异对程序性能有何影响?
【10月更文挑战第30天】结构体和类在内存管理方面的差异对程序性能有着重要的影响。在实际编程中,需要根据具体的应用场景和性能要求,合理地选择使用结构体或类,以优化程序的性能和内存使用效率。
|
16天前
|
存储 缓存 安全
Java内存模型(JMM):深入理解并发编程的基石####
【10月更文挑战第29天】 本文作为一篇技术性文章,旨在深入探讨Java内存模型(JMM)的核心概念、工作原理及其在并发编程中的应用。我们将从JMM的基本定义出发,逐步剖析其如何通过happens-before原则、volatile关键字、synchronized关键字等机制,解决多线程环境下的数据可见性、原子性和有序性问题。不同于常规摘要的简述方式,本摘要将直接概述文章的核心内容,为读者提供一个清晰的学习路径。 ####
35 2
|
17天前
|
存储 安全 Java
什么是 Java 的内存模型?
Java内存模型(Java Memory Model, JMM)是Java虚拟机(JVM)规范的一部分,它定义了一套规则,用于指导Java程序中变量的访问和内存交互方式。
42 1
|
23天前
|
存储 运维 Java
💻Java零基础:深入了解Java内存机制
【10月更文挑战第18天】本文收录于「滚雪球学Java」专栏,专业攻坚指数级提升,希望能够助你一臂之力,帮你早日登顶实现财富自由🚀;同时,欢迎大家关注&&收藏&&订阅!持续更新中,up!up!up!!
28 1
|
26天前
|
存储 算法 Java
Java虚拟机(JVM)的内存管理与性能优化
本文深入探讨了Java虚拟机(JVM)的内存管理机制,包括堆、栈、方法区等关键区域的功能与作用。通过分析垃圾回收算法和调优策略,旨在帮助开发者理解如何有效提升Java应用的性能。文章采用通俗易懂的语言,结合具体实例,使读者能够轻松掌握复杂的内存管理概念,并应用于实际开发中。
|
26天前
|
监控 安全 Java
Java Z 垃圾收集器如何彻底改变内存管理
大家好,我是V哥。今天聊聊Java的ZGC(Z Garbage Collector)。ZGC是一个低延迟垃圾收集器,专为大内存应用场景设计。其核心优势包括:极低的暂停时间(通常低于10毫秒)、支持TB级内存、使用着色指针实现高效对象管理、并发压缩和去碎片化、不分代的内存管理。适用于实时数据分析、高性能服务器和在线交易系统等场景,能显著提升应用的性能和稳定性。如何启用?只需在JVM启动参数中加入`-XX:+UseZGC`即可。
145 0
|
3月前
|
存储 编译器 C语言
【C语言篇】数据在内存中的存储(超详细)
浮点数就采⽤下⾯的规则表⽰,即指数E的真实值加上127(或1023),再将有效数字M去掉整数部分的1。
378 0