Docker 容器内存一直增长被 OOM Killer 的问题 - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
JamesTao
V2EX    Java

Docker 容器内存一直增长被 OOM Killer 的问题

  •  
  •   JamesTao 226 天前 2584 次点击
    这是一个创建于 226 天前的主题,其中的信息可能已经有所发展或是发生改变。
    在两台服务器上使用 docker 部署了相同的服务
    基础镜像是 openjdk:17-oracle, 容器限制了 2G 内存
    容器内运行了 springboot, JAVA_OPTS 设置为 -Xms512m -Xmx1536m
    容器运行一段时间后, 被系统 oom killer, 被 kill 前观测到容器使用内存接近 2G. 进入容器用 top 命令查看, java 占用内存和容器使用内存保持一致, 都是接近 2G
    两个容器均发生此现象

    在排除 jvm heap 内存泄漏后. 了如下调整
    JAVA_OPTS 设置为 -Xms750m -Xmx750m -XX:MaxDirectMemorySize=750m, 进入容器查看 NMT 数据如下




    现在的问题是
    1. 为什么两个容器实际使用的内存不一样, 但是 NMT 的数据几乎一致
    2. 如何定位和解决现在 java 内存一直在增长并造成 oom killer 的问题

    谢谢
    9 条回复    2025-04-08 09:25:19 +08:00
    FaustY
        1
    FaustY  
       226 天前
    之前遇到过类似的,换了 oracle jdk 的容器就好了
    FaustY
        2
    FaustY  
       226 天前
    自己打基础镜像或者用 bitnami/java
    lingcen000
        3
    lingcen000  
       226 天前
    实际就是堆外内存一直增长导致的,加了限制就好了
    guanzhangzhang
        4
    guanzhangzhang  
       226 天前   1
    有个最常见问题就是,低版本 jdk 无法识别 cgroup 内存限制
    JamesTao
        5
    JamesTao  
    OP
       226 天前
    @lingcen000 请问下如何限制堆外内存呢?

    @guanzhangzhang 用的基础镜像也是官方的, 系统和 jdk 的版本应该都对上吧
    zhady009
        6
    zhady009  
       226 天前
    容器限制了 2G, JVM 最大堆 1536m 堆外一般不会那么大具体得看你啥应用, 排查的话用 JFR 看事件很容易就能看出来
    fredcc
        7
    fredcc  
       225 天前 via Android
    堆内存只是一部分,还有其他内存消耗。为什么慢慢变大上工具分析咯。比如
    https://arthas.aliyun.com/doc/expert/user-question-history13508.html
    zhongpingjing
        8
    zhongpingjing  
       222 天前
    堆外内存只能限制元空间还有直接内存,但是堆外内存不止这两个,所以解决方案就是把最大堆内存调低一些
    JamesTao
        9
    JamesTao  
    OP
       222 天前
    JFR, Arthas 似乎都是分析 jvm 内存的. 但是从现象上看, jvm 内存没有问题. 一直增大的是 jvm 外的内存
    关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     2514 人在线   最高记录 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 25ms UTC 02:30 PVG 10:30 LAX 18:30 JFK 21:30
    Do have faith in what you're doing.
    ubao msn snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86