基于容器的Java内存参数解析

本文涉及的产品
云解析 DNS,旗舰版 1个月
全局流量管理 GTM,标准版 1个月
公共DNS(含HTTPDNS解析),每月1000万次HTTP解析
简介: 在基于物理的服务器(此处主要与容器平台进行区分,故此描述)上运行Java应用程序时,我们通常会使用Java虚拟机参数"-Xms、-Xmx"来指定Java堆内存的初始值和最大值。如果要将我们的应用程序移植到容器平台,如何在容器环境中配置Java堆内存大小呢?有没有最佳做法?在本文中,我们将讨论可用于指定Java堆内存大小的JVM参数以及最优选择。

       在基于物理的服务器(此处主要与容器平台进行区分,故此描述)上运行Java应用程序时,我们通常会使用Java虚拟机参数"-Xms、-Xmx"来指定Java堆内存的初始值和最大值。如果要将我们的应用程序移植到容器平台,如何在容器环境中配置Java堆内存大小呢?有没有最佳做法?在本文中,我们将讨论可用于指定Java堆内存大小的JVM参数以及最优选择。

      在我们的容器环境中,通常可借助以下3个不同的选项来指定容器中的Java堆内存的大小。 具体:

       1、-XX:Min(Max)RAMFraction

       2、-XX:Min(Max)RAMPercentage

       3、-Xms、-Xmx

       下面针对这些JVM参数,我们进行简要的解析:     

1、-XX:Min(Max)RAMFraction

      此参数“-XX:MinRAMFraction”、“-XX:MaxRAMFraction”支持JDK版本:目前仅支持的版本为Java 8 update 131 to Java 8 update 190。因此,如果使用的是其他版本的JDK,则不能使用此选项。

      原理解析:

      假设我们已为容器分配了1 GB的内存,那么如果配置-XX:MaxRAMFraction = 2,则将为Java堆大小分配大约512GB(即1GB的1/2)。

      如果要使用“-XX:MaxRAMFraction” JVM参数,请确保传递这两个附加的JVM参数以及“ -XX:+UnlockExperimentalVMOptions与-XX:+UseCGroupMemoryLimitForHeap”。仅当我们配置这两个JVM参数时,JVM才会从容器的内存大小中得出堆内存大小值,否则,它将从基础主机的内存大小中得出堆大小值。



[administrator@JavaLangOutOfMemory ~ ]% docker run -m 1GB openjdk:8u131 java -XX:+UnlockExperimentalVMOptions -XX:+UseCGroupMemoryLimitForHeap -XX:MaxRAMFraction = 2 
-XshowSettings:vm-版本VM设置:最高堆大小(估计):494.94M

     通过上面命令,我们可以看到docker容器的内存此时设置为“ 1GB ”(即-m 1GB)和“ -XX:MaxRAMFraction = 2 ”。基于此设置,JVM将最大堆大小分配为494.9MB(约为1GB大小的一半)。

     注意:“ -XX:MaxRAMFraction”和“ -XX:MinRAMFraction”均用于确定最大Java堆大小。JDK开发团队可以使用比“ -XX:MinRAMFraction”更好的名称。这个名称使我们认为,“-XX:MinRAMFraction”参数用于配置最小堆大小。但这不是真的。要了解有关它们差异的更多信息,请继续阅读本文。

     会有什么限制?以下为这种方法的缺陷:

     1、假设我们配置docker内存大小的40%,则必须设置“ -XX:MaxRAMFraction = 2.5”。当传递2.5作为值时,JVM将不会启动。这是因为“ -XX:MaxRAMFraction”只能接受整数值,而不能接受十进制值。请参阅以下示例,其中JVM无法启动。


[administrator@JavaLangOutOfMemory ~ ]% docker run -m 1GB openjdk:8u131 java -XX:+UnlockExperimentalVMOptions -XX:+UseCGroupMemoryLimitForHeap -XX:MaxRAMFraction=2.5 -XshowSettings:vm -version VM
Improperly specified VM option 'MaxRAMFraction=2.5'
Improperly specified VM option 'MaxRAMFraction=2.5'
Error: Could not create the Java Virtual Machine.
Error: A fatal exception has occurred. Program will exit.

   2、在此选项中,Java应用程序的堆大小将从容器的内存大小得出(因为它是分数基础)。假设如果我们的应用程序需要1GB的堆大小才能获得最佳性能,并且如果将容器配置为以小于1GB的内存大小运行,则我们的应用程序仍将运行,但是会遭受不良的性能特征。

     3、在现代Java版本中不建议使用此参数。从Java 8 update 131 to Java 8 update 190仅受支持。        

2、-XX:Min(Max)RAMPercentage

     此参数“ -XX:MaxRAMPercentage”、“-XX:MinRAMPercentage”支持JDK版本:Java 8 update 191及更高因此,如果在较早的JDK版本上运行,则不能使用此JVM参数。

      原理解析:

      假设我们已为容器分配了1 GB的内存,那么如果配置-XX:MaxRAMPercentage = 50,则将为我们的应用的Java堆大小分配大约512GB(即1GB的1/2)。


[administrator@JavaLangOutOfMemory ~ ]% docker run -m 1GB openjdk:10 java -XX:MaxRAMPercentage = 50 -XshowSettings:vm -version

      此处,我们可以看到Docker容器的内存此时设置为-m 1GB和-XX:MaxRAMPercentage = 50。根据此参数配置,JVM将最大堆大小分配为494.9MB(大约1GB的一半)。

     备注:网上有文章中,提到在传递“ -XX:MaxRAMPercentage”,“-XX:InitialRAMPercentage”,“-XX:MinRAMPercentage”时,需要传递JVM参数-XX。其实不是这样。JVM中的默认参数传递了“ -XX:+ UseContainerSupport”。因此,我们无需显式定义。

       会有什么限制?以下为这种方法的缺陷:

       1、Java的较早版本不支持此参数。仅Java 8更新191支持它。

      2、在此选项中,我们的Java应用程序的堆大小将由容器的内存大小得出(因为它是基于百分比的)。假设我们的应用程序需要1GB的堆大小才能获得最佳性能,并且如果将容器配置为以小于1GB的内存大小运行,则您的应用程序仍将运行,但是性能会很差。      

3. -Xmx

      此参数支持所有的JDK版本。

      原理解析:

     使用“ -Xmx” 此类型的JVM参数,我们可以指定细粒度的特定大小,例如512MB,1024MB。

      在非容器(传统物理服务器世界)环境下支持的-Xmx操作如下:


[administrator@JavaLangOutOfMemory ~ ]%java -Xmx512m -XshowSettings:vm -version

      在容器环境下支持的-Xmx操作如下:


[administrator@JavaLangOutOfMemory ~ ]%docker run -m 1GB openjdk:8u131 java -Xmx512m -XshowSettings:vm -version VM

    备注:如果分配的“-Xmx”多于容器的内存大小,则我们的应用程序将遇到“ java.lang.OutOfMemoryError:杀死进程或牺牲子进程” 等异常事件发生。

     无论我们使用什么选项来配置堆大小(即-XX:MaxRAMFraction、-XX:MaxRAMPercentage、-Xmx),请始终确保为我们的容器(即-m)分配的内存至少多25%堆大小值。假设我们已将-Xmx值配置为2GB,然后将容器的内存大小至少配置为2.5GB。即使我们的Java应用程序是将在容器上运行的唯一进程,也要执行此操作。因为许多工程师认为Java应用程序消耗的值不会超过-Xmx值。那是不对的。除了堆空间,应用程序还需要Java线程,垃圾回收,元空间,本机内存和套接字缓冲区的空间。所有这些组件都需要分配的堆大小之外的其他内存。除此之外,其他小型进程(例如APM代理,splunk脚本等)也将需要内存。

     如果仅在容器中运行Java应用程序,则将初始堆大小设置为与最大堆相同的大小值(即,使用“ -XX:InitialRAMFraction”、“-XX:InitialRAMPercentage”、“-Xms”)。设置初始堆大小和最大堆值相同具有某些优点。其中之一是:将减少垃圾收集的暂停时间。因为只要堆大小从初始分配的大小增加,它就会暂停JVM。当将初始堆大小和最大堆大小设置为相同时,可以避免这种情况。除此之外,如果我们没有分配的容器的内存大小,那么JVM甚至不会启动(这比在进行事务处理时遇到OutOfMemoryError更好)。

    在我看来,我倾向于使用-Xmx选项而不是-XX:MaxRAMFraction、-XX:MaxRAMPercentage选项来指定容器世界中的Java堆大小,原因如下:内存大小是决定应用程序性能的关键。它影响垃圾收集行为和性能特征,不希望该因素由容器的内存设置决定。

      使用“ -Xmx”,我可以设置512MB,256MB等细粒度/精度值。加之,-Xmx在所有Java版本上均受支持。



相关文章
|
29天前
|
存储 Java 计算机视觉
Java二维数组的使用技巧与实例解析
本文详细介绍了Java中二维数组的使用方法
46 15
|
7天前
|
XML JSON Java
Java中Log级别和解析
日志级别定义了日志信息的重要程度,从低到高依次为:TRACE(详细调试)、DEBUG(开发调试)、INFO(一般信息)、WARN(潜在问题)、ERROR(错误信息)和FATAL(严重错误)。开发人员可根据需要设置不同的日志级别,以控制日志输出量,避免影响性能或干扰问题排查。日志框架如Log4j 2由Logger、Appender和Layout组成,通过配置文件指定日志级别、输出目标和格式。
|
2月前
|
人工智能 自然语言处理 Java
FastExcel:开源的 JAVA 解析 Excel 工具,集成 AI 通过自然语言处理 Excel 文件,完全兼容 EasyExcel
FastExcel 是一款基于 Java 的高性能 Excel 处理工具,专注于优化大规模数据处理,提供简洁易用的 API 和流式操作能力,支持从 EasyExcel 无缝迁移。
223 9
FastExcel:开源的 JAVA 解析 Excel 工具,集成 AI 通过自然语言处理 Excel 文件,完全兼容 EasyExcel
|
29天前
|
算法 搜索推荐 Java
【潜意识Java】深度解析黑马项目《苍穹外卖》与蓝桥杯算法的结合问题
本文探讨了如何将算法学习与实际项目相结合,以提升编程竞赛中的解题能力。通过《苍穹外卖》项目,介绍了订单配送路径规划(基于动态规划解决旅行商问题)和商品推荐系统(基于贪心算法)。这些实例不仅展示了算法在实际业务中的应用,还帮助读者更好地准备蓝桥杯等编程竞赛。结合具体代码实现和解析,文章详细说明了如何运用算法优化项目功能,提高解决问题的能力。
58 6
|
29天前
|
存储 算法 搜索推荐
【潜意识Java】期末考试可能考的高质量大题及答案解析
Java 期末考试大题整理:设计一个学生信息管理系统,涵盖面向对象编程、集合类、文件操作、异常处理和多线程等知识点。系统功能包括添加、查询、删除、显示所有学生信息、按成绩排序及文件存储。通过本题,考生可以巩固 Java 基础知识并掌握综合应用技能。代码解析详细,适合复习备考。
21 4
|
1月前
|
SQL Java 数据库连接
如何在 Java 代码中使用 JSqlParser 解析复杂的 SQL 语句?
大家好,我是 V 哥。JSqlParser 是一个用于解析 SQL 语句的 Java 库,可将 SQL 解析为 Java 对象树,支持多种 SQL 类型(如 `SELECT`、`INSERT` 等)。它适用于 SQL 分析、修改、生成和验证等场景。通过 Maven 或 Gradle 安装后,可以方便地在 Java 代码中使用。
249 11
|
1月前
|
存储 分布式计算 Hadoop
基于Java的Hadoop文件处理系统:高效分布式数据解析与存储
本文介绍了如何借鉴Hadoop的设计思想,使用Java实现其核心功能MapReduce,解决海量数据处理问题。通过类比图书馆管理系统,详细解释了Hadoop的两大组件:HDFS(分布式文件系统)和MapReduce(分布式计算模型)。具体实现了单词统计任务,并扩展支持CSV和JSON格式的数据解析。为了提升性能,引入了Combiner减少中间数据传输,以及自定义Partitioner解决数据倾斜问题。最后总结了Hadoop在大数据处理中的重要性,鼓励Java开发者学习Hadoop以拓展技术边界。
50 7
|
29天前
|
存储 Java
【潜意识Java】期末考试可能考的选择题(附带答案解析)
本文整理了 Java 期末考试中常见的选择题,涵盖数据类型、控制结构、面向对象编程、集合框架、异常处理、方法、流程控制和字符串等知识点。每道题目附有详细解析,帮助考生巩固基础,加深理解。通过这些练习,考生可以更好地准备考试,掌握 Java 的核心概念和语法。
32 1
|
1月前
|
Kubernetes Linux 虚拟化
入门级容器技术解析:Docker和K8s的区别与关系
本文介绍了容器技术的发展历程及其重要组成部分Docker和Kubernetes。从传统物理机到虚拟机,再到容器化,每一步都旨在更高效地利用服务器资源并简化应用部署。容器技术通过隔离环境、减少依赖冲突和提高可移植性,解决了传统部署方式中的诸多问题。Docker作为容器化平台,专注于创建和管理容器;而Kubernetes则是一个强大的容器编排系统,用于自动化部署、扩展和管理容器化应用。两者相辅相成,共同推动了现代云原生应用的快速发展。
188 11
|
1月前
|
存储 Ubuntu 关系型数据库
《docker基础篇:7.Docker容器数据卷》包括坑、回顾下上一讲的知识点,参数V、是什么、更干嘛、数据卷案例
《docker基础篇:7.Docker容器数据卷》包括坑、回顾下上一讲的知识点,参数V、是什么、更干嘛、数据卷案例
58 13

热门文章

最新文章

推荐镜像

更多