V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
stardustree
V2EX  ›  问与答

prometheus 告警规则(rule)支持在数据缺失的时候维持告警状态不发生变化吗?

  •  
  •   stardustree · 2020-05-28 10:09:14 +08:00 · 720 次点击
    这是一个创建于 1936 天前的主题,其中的信息可能已经有所发展或是发生改变。

    prometheus 一个 alert 处于 active 后,如果规则中的指标出现了数据缺失,会直接把这个 alert inactive,有办法避免这个现象吗?数据缺失的时候还保持 alert 处于 active 状态。

    因为被监控端的问题,偶尔会出现数据缺失,比如本来应该 1 分钟 1 个数据点,突然某分钟没有数据点了,这种现象一天会发生若干次,导致告警频繁的被关闭,不胜其烦。

    有一个临时的解决方案,就是把 rule 里的指标查询周期设置的长一点,比如设为 5 分钟,5 分钟都没有数据的概率很低,但这样会影响一般运维人员的理解,他们很难理解这个逻辑。

    目前尚无回复
    关于   ·   帮助文档   ·   自助推广系统   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   5919 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 23ms · UTC 03:13 · PVG 11:13 · LAX 20:13 · JFK 23:13
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.