大家的公司是如何解决晚上值班告警的问题的? - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
Ysaac
V2EX    职场话题

大家的公司是如何解决晚上值班告警的问题的?

  •  
  •   Ysaac 290 天前 2571 次点击
    这是一个创建于 290 天前的主题,其中的信息可能已经有所发展或是发生改变。

    我所在公司轮流值班,有时候告警很多,一晚上都睡不好,第二天还要继续上班,感觉非常痛苦。问下其他公司也是这样吗?如果想换公司该怎么选

    7 条回复    2024-12-29 16:56:08 +08:00
    NamelessRain
        1
    NamelessRain  
       290 天前   1
    我觉得应该把问题提出来到开发那边为什么业务那么不稳定? 是什么导致的告警无法自动化解决吗?
    yyzh
        2
    yyzh  
       290 天前
    oncall 也没道理单人 7X24
    Tumblr
        3
    Tumblr  
       289 天前
    follow the sun ,在不同时区有不同的值班团队。
    Beats
        4
    Beats  
       289 天前
    首先,告警是否都是有问题的,没问题的告警让负责人下掉,下不掉就让他们自己接收别告给值班人。
    其次,如果告警确实是代码有问题,责令负责人多久内修改完问题。
    最后,告警分好级别,普通告警能容忍几小时后处理的就不要打电话,白天处理,晚上夜里打电话告警的都必须是要资损那种。
    k9982874
        5
    k9982874  
       289 天前 via Android
    只有最紧急的故障(如服务下线)才会立即处理,其它报警第二天上班再说
    kingcanfish
        6
    kingcanfish  
       289 天前
    分级别呗,就拿错误日志来说,单条日志报警 L2 晚上不管就行,10 分钟内的错误日志超过多少阈值 比如 1 万条,算 L1, 30 分钟内响应, 实例挂了无限重启 L0 ,5 分钟内响应
    MeiJiayun
        7
    MeiJiayun  
       289 天前 via iPhone
    值班到夜间 12 点多,就不管告警了,除非业务人员打电话,第二天白天到公司上班再继续处理
    关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     5582 人在线   最高记录 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 24ms UTC 01:24 PVG 09:24 LAX 18:24 JFK 21:24
    Do have faith in what you're doing.
    ubao snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86