go 服务器内存偶尔会飙升,有什么办法可以把内存 dump 下来? - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
请不要在回答技术问题时复制粘贴 AI 生成的内容
pabno
V2EX    程序员

go 服务器内存偶尔会飙升,有什么办法可以把内存 dump 下来?

  •  
  •   pabno 2020-06-29 09:56:31 +08:00 4902 次点击
    这是一个创建于 1931 天前的主题,其中的信息可能已经有所发展或是发生改变。

    最近生产服务器内存偶尔会飙升导致监控报警,不知道有没有什么办法把内存 dump 下来看里面具体有哪些对象,就像 java 中的 jmap -heap 一样

    试过 pprof,这个据我了解只能看到采样期间的内存分配情况,还有就是累计的分配情况,不能看到内存中对象分布

    11 条回复    2020-07-01 19:45:25 +08:00
    richzhu
        1
    richzhu  
       2020-06-29 10:23:43 +08:00
    同问,有的时候真的是莫名其妙
    janxin
        2
    janxin  
       2020-06-29 10:31:30 +08:00
    reus
        3
    reus  
       2020-06-29 10:37:03 +08:00   3
    如果你用的是 1.12 或者更新的版本,那 RSS 会一直增长,只在系统内存不够用的时候,内核才会回收这些内存。如果你的监控指标是 RSS,那可以用 GODEBUG=madvdOntneed=1 这个环境变量切换回旧的回收方式。
    petelin
        4
    petelin  
       2020-06-29 12:19:55 +08:00 via iPhone
    pprof 里有 heap debug=1 会有全部的内存分配
    gcore 配合 viewcore 就是对比 linux core
    Lonenso
        5
    Lonenso  
       2020-06-29 17:20:49 +08:00
    pabno
        6
    pabno  
    OP
       2020-06-30 13:50:41 +08:00
    @janxin 这个 dump 出来没找到有什么工具可以分析
    pabno
        7
    pabno  
    OP
       2020-06-30 13:55:43 +08:00
    @Lonenso 这个好像可以,感谢
    pabno
        8
    pabno  
    OP
       2020-06-30 13:56:23 +08:00
    @reus 我们暂时用的还是 1.10 版本,所以应该不存在 rss 一直增长的问题
    janxin
        9
    janxin  
       2020-06-30 17:11:04 +08:00
    pabno
        10
    pabno  
    OP
       2020-07-01 18:18:44 +08:00
    @janxin 这个尝试了一下,在 linux 上跑 viewcore 会报:invalid memory address or nil pointer dereference 的错误。我现在是使用 gcore 把进程的 coredump 文件 dump 下来再使用编译后的 viewcore 分析就会报错,但是如果使用 dlv 分析是正常的。可惜 dlv 没法查看内存分布。使用的 go 版本是 1.13

    @Lonenso 这个尝试了下,还是没法得到想要的功能
    Lonenso
        11
    Lonenso  
       2020-07-01 19:45:25 +08:00
    因为你要解决内存飙升, 也有很多种情况, 我目前遇到过自己写的 goroutine 泄露导致的内存飙升. 我觉得你可以深入使用 pprof.
    关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     2708 人在线   最高记录 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 27ms UTC 08:58 PVG 16:58 LAX 01:58 JFK 04:8
    Do have faith in what you're doing.
    ubao snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86