知识卡片

普通读书笔记卡 · 2856.l.1.a.1

告警等待期区分异常与触发

理解等级:中级

书中节点下线规则要求up == 0持续一分钟:条件初次满足时为PENDING,持续达到设定时长才转FIRING,随后由Alertmanager路由通知。

因此“观察到异常”“规则正式触发”“通知已送达”是三个不同环节。排查漏报时应沿规则状态和通知路由逐段核对,而不能只看监控页面是否有数据。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《高可用可伸缩微服务架构》第14章《微服务监控实战》14.2.5节“Prometheus的告警机制”(源文件:OEBPS/Text/chapter019.xhtml;规则`526_2.jpg`、状态`528_1.jpg`/`528_2.jpg`、邮件`529_1.jpg`) - 结论依据:规则截图定义`expr: up == 0`与`for: 1m`,前后状态截图展示PENDING到FIRING,邮件图显示Alertmanager后续通知;因此规则判定与通知结果需分别观察。 - 原始内容:从图中可以看出此时有两个node服务下线了,node服务的State是PENDING状态,1分钟后变FIRING状态……从图中可以看出下线服务的State为FIRING状态,这时会触发Alertmanager的报警机制,将以邮件的方式发信息给相关用户