返回顶部
首页 > 资讯 > 后端开发 > Python >容器环境的JVM内存设置实践记录
  • 147
分享到

容器环境的JVM内存设置实践记录

2024-04-02 19:04:59 147人浏览 安东尼

Python 官方文档:入门教程 => 点击学习

摘要

目录Java Heap基础知识容器环境的Java HeapUseContainerSupport最佳实践Java Heap基础知识 默认情况下,JVM自动分配的heap大小取决于机器

Java Heap基础知识

默认情况下,JVM自动分配的heap大小取决于机器配置,比如我们到一台64G内存服务器

java -XX:+PrintFlagsFinal -version | grep -Ei "maxheapsize|maxram"
    uintx DefaultMaxRAMFraction                     = 4                                   {product}
    uintx MaxHeapSize                              := 16875782144                         {product}
 uint64_t MaxRAM                                    = 137438953472                        {pd product}
    uintx MaxRAMFraction                            = 4                                   {product}
   double MaxRAMPercentage                          = 25.000000                           {product}
java version "1.8.0_192"
Java(TM) SE Runtime Environment (build 1.8.0_192-b12)
Java HotSpot(TM) 64-Bit Server VM (build 25.192-b12, mixed mode)

可以看到,JVM 分配的最大MaxHeapSize为 16G,计算公式如下:

MaxHeapSize = MaxRAM * 1 / MaxRAMFraction

MaxRAMFraction 默认是4,意味着,每个jvm最多使用25%的机器内存。

但是需要注意的是,JVM实际使用的内存会比heap内存大:

JVM内存  = heap 内存 + 线程stack内存 (XSS) * 线程数 + 启动开销(constant overhead)

默认的XSS通常在256KB到1MB,也就是说每个线程会分配最少256K额外的内存,constant overhead是JVM分配的其他内存。

我们可以通过-Xmx 指定最大堆大小。

java -XX:+PrintFlagsFinal -Xmx1g -version | grep -Ei "maxheapsize|maxram"
    uintx DefaultMaxRAMFraction                     = 4                                   {product}
    uintx MaxHeapSize                              := 1073741824                          {product}
 uint64_t MaxRAM                                    = 137438953472                        {pd product}
    uintx MaxRAMFraction                            = 4                                   {product}
   double MaxRAMPercentage                          = 25.000000                           {product}
java version "1.8.0_192"
Java(TM) SE Runtime Environment (build 1.8.0_192-b12)
Java HotSpot(TM) 64-Bit Server VM (build 25.192-b12, mixed mode)

此外,还可以使用XX:MaxRAM来指定。

java -XX:+PrintFlagsFinal -XX:MaxRAM=1g -version | grep -Ei 

但是指定-Xmx或者MaxRAM需要了解机器的内存,更好的方式是设置MaxRAMFraction,以下是不同的Fraction对应的可用内存比例:

+----------------+-------------------+
| MaxRAMFraction | % of RAM for heap |
|----------------+-------------------|
|              1 |              100% |
|              2 |               50% |
|              3 |               33% |
|              4 |               25% |
+----------------+-------------------+

容器环境的Java Heap

容器环境,由于java获取不到容器的内存限制,只能获取到服务器的配置:

$ Docker run --rm alpine free -m
             total     used     free   shared  buffers   cached
Mem:          1998     1565      432        0        8     1244
$ docker run --rm -m 256m alpine free -m
             total     used     free   shared  buffers   cached
Mem:          1998     1552      445        1        8     1244

这样容易引起不必要问题,例如限制容器使用100M内存,但是jvm根据服务器配置来分配初始化内存,导致java进程超过容器限制被kill掉。为了解决这个问题,可以设置-Xmx或者MaxRAM来解决,但就想第一部分描述的一样,这样太不优雅了!

为了解决这个问题,Java 10 引入了 +UseContainerSupport(默认情况下启用),通过这个特性,可以使得JVM在容器环境分配合理的堆内存。 并且,在jdk8U191版本之后,这个功能引入到了JDK 8,而JDK 8是广为使用的JDK版本。

UseContainerSupport

-XX:+UseContainerSupport允许JVM 从主机读取cgroup限制,例如可用的CPU和RAM,并进行相应的配置。这样当容器超过内存限制时,会抛出OOM异常,而不是杀死容器。
该特性在Java 8u191 +,10及更高版本上可用。

注意,在191版本后,-XX:{Min|Max}RAMFraction 被弃用,引入了-XX:MaxRAMPercentage,其值介于0.0到100.0之间,默认值为25.0。

最佳实践

拉取最新的openjdk:8-jre-alpine作为底包,截止这篇博客,最新的版本是212,>191

docker run -it --rm openjdk:8-jre-alpine java -version
openjdk version "1.8.0_212"
OpenJDK Runtime Environment (IcedTea 3.12.0) (Alpine 8.212.04-r0)
OpenJDK 64-Bit Server VM (build 25.212-b04, mixed mode)

我们构建一个基础镜像,dockerfile如下:

FROM openjdk:8-jre-alpine
MAINTAINER jadepeng
RUN echo "Http://mirrors.aliyun.com/alpine/v3.6/main" > /etc/apk/repositories \
    && echo "http://mirrors.aliyun.com/alpine/v3.6/commUnity" >> /etc/apk/repositories \
    && apk update upgrade \
    && apk add --no-cache procps unzip curl bash tzdata \
    && ln -sf /usr/share/zoneinfo/Asia/Shanghai /etc/localtime \
    && echo "Asia/Shanghai" > /etc/timezone
RUN apk add --update ttf-dejavu && rm -rf /var/cache/apk/*

在应用的启动参数,设置 -XX:+UseContainerSupport,设置-XX:MaxRAMPercentage=75.0,这样为其他进程(debug、监控)留下足够的内存空间,又不会太浪费RAM。

到此这篇关于容器环境的JVM内存设置实践记录的文章就介绍到这了,更多相关容器环境的JVM内存内容请搜索编程网以前的文章或继续浏览下面的相关文章希望大家以后多多支持编程网!

--结束END--

本文标题: 容器环境的JVM内存设置实践记录

本文链接: https://lsjlt.com/news/143811.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

猜你喜欢
  • 容器环境的JVM内存设置实践记录
    目录Java Heap基础知识容器环境的Java HeapUseContainerSupport最佳实践Java Heap基础知识 默认情况下,jvm自动分配的heap大小取决于机器...
    99+
    2024-04-02
  • 容器环境的JVM内存如何设置
    本文小编为大家详细介绍“容器环境的JVM内存如何设置”,内容详细,步骤清晰,细节处理妥当,希望这篇“容器环境的JVM内存如何设置”文章能帮助大家解决疑惑,下面跟着小编的思路慢慢深入,一起来学习新知识吧。Java Heap基础知识默认情况下,...
    99+
    2023-06-29
  • Docker容器搭建android编译环境的实践记录
    目录1 部署容器1.1 手动部署1.1.1 配置docker1.1.2 启动容器1.1.3 配置环境1.2 Dockerfile2 镜像管理3 容器管理3.1 每个用户各用容器3.1...
    99+
    2024-04-02
  • 容器化Python和JavaScript:Unix环境下的最佳实践。
    容器化Python和JavaScript:Unix环境下的最佳实践 在当今的软件开发领域中,容器化已成为一种越来越流行的技术。作为一种轻量级、可移植的解决方案,容器化可以使开发人员更加高效地管理和部署应用程序。在本文中,我们将探讨如何在Un...
    99+
    2023-10-12
    unix 容器 javascript
  • 云服务器配置java环境设置方法有哪些内容
    使用Java官方JDK JDK是Java开发中最常用的工具之一。Java开发人员可以使用Java官方JDK来安装、配置和运行Java程序。在使用Java官方JDK时,需要先安装Java源代码包(即Jre和Eclipse等Java开发工具包...
    99+
    2023-10-27
    服务器配置 环境 方法
  • Java 日志记录的最佳实践:Linux 环境下使用 Git 管理。
    Java 日志记录的最佳实践:Linux 环境下使用 Git 管理 日志记录是软件开发中非常重要的一部分,它可以帮助开发人员追踪和调试代码。Java 的日志记录机制提供了一种可靠的方式来记录应用程序的状态和活动。在本文中,我们将讨论 Jav...
    99+
    2023-08-17
    linux 日志 git
  • Bash 日志记录:Python 容器的最佳实践是什么?
    在 Python 应用程序开发中,容器化是一种非常常见的方式,可以帮助开发人员更好地管理和部署应用程序。但是,在容器化过程中,日志记录是一个很重要的问题。在 Bash 中,我们可以使用不同的技术来记录日志。在本文中,我们将探讨 Bash ...
    99+
    2023-10-22
    容器 日志 bash
  • 在Java应用程序中使用Bash脚本来记录日志:容器环境中的最佳实践是什么?
    在现代软件开发中,容器化技术已经变得越来越普遍。这种技术可以让我们更加轻松地构建、部署和管理应用程序。随着容器的广泛应用,我们需要思考如何在容器环境中记录应用程序的日志。在这篇文章中,我们将讨论在Java应用程序中使用Bash脚本来记录日...
    99+
    2023-11-05
    日志 bash 容器
  • Linux 容器中的 Python 日志记录:最佳实践是什么?
    在现代应用程序开发中,日志记录是不可或缺的一部分。日志记录可以帮助开发人员跟踪应用程序中的错误,分析应用程序的性能,并提供用于调试和维护应用程序的有用信息。在容器化的应用程序中,日志记录变得更加重要,因为容器化的应用程序往往是分布式的、高...
    99+
    2023-11-09
    linux 容器 日志
  • Python 日志记录的优秀实践:在 Linux 容器中的应用。
    Python 日志记录的优秀实践:在 Linux 容器中的应用 在现代软件开发中,日志记录是必不可少的一部分。它可以帮助开发人员诊断和修复问题,监测应用程序的运行情况,同时也是满足合规性要求的必要条件。Python 作为一种广泛使用的编程语...
    99+
    2023-11-09
    linux 容器 日志
  • Python 日志记录的最佳实践:如何避免分布式环境下的问题?
    在日常的 Python 开发中,日志记录是必不可少的一项工作。通过记录应用程序的运行状态、错误信息等,可以帮助我们快速定位和解决问题。但在分布式环境下,日志记录会面临一些挑战,如如何统一管理日志、如何避免日志重复记录等等。本文将介绍 Py...
    99+
    2023-07-22
    日志 分布式 函数
  • 使用Python中的Numpy容器来记录日志:最佳实践和技巧。
    在日志记录中,使用Numpy容器可能不是最常见的做法,但是它确实是一个非常强大的工具,可以帮助我们更好地组织和管理日志数据。本文将介绍如何使用Numpy容器记录日志,并提供一些最佳实践和技巧。 什么是Numpy容器? Numpy是一个非常...
    99+
    2023-09-08
    容器 numpy 日志
  • 非易失性内存在阿里生产环境的首次应用:Tair NVM最佳实践总结
    本文介绍了非易失性内存在阿里巴巴集团生产环境的首次应用:线上运行的情况;使用NVM遇到的问题和优化的过程;最后,总结性地给出了基于NVM构建缓存服务的设计要点,希望这些实践总结能对大家的工作有所启发。 ...
    99+
    2024-04-02
  • Java应用程序的日志记录:如何在Unix容器中做到最佳实践?
    日志记录是每个应用程序的必备功能。它可以帮助开发人员和运维人员快速定位和解决问题,同时也有助于监控应用程序的运行状态。在Unix容器中部署Java应用程序时,我们需要注意一些最佳实践,以确保日志记录功能的可靠性和稳定性。 使用日志框架 ...
    99+
    2023-06-21
    unix 容器 日志
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作