知识卡片
阈值告警疲劳
静态阈值告警常把正常波动当故障,也会漏掉低流量但高影响的问题。告警太多会训练团队忽视告警。SLO用错误预算衡量用户受损程度,让告警更接近需要人介入的时刻。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 使用SLO来提高可靠性 · 查看原书依据
在软件行业中,基于监控告警的信噪比很低,这往往会导致告警疲劳,即逐渐减少对所有告警的关注,因为其中有很多都是误报或者不需要操作甚至无用的告警。
参考来源
- 位置:《可观测性工程》第12章《使用SLO来提高可靠性》"12.1 传统监控方法造成危险的告警疲劳"及"12.2 阈值告警只适用于'已知的未知'情况"一节(源文件:extracted/可观测性工程/_epub-src/OEBPS/024.xhtml)
- 结论依据:原文明确"基于监控告警的信噪比很低,这往往会导致告警疲劳,即逐渐减少对所有告警的关注",并说明"静态阈值过于僵硬和粗糙,不能可靠地表明动态环境中的用户体验下降……这就是SLO可以帮助补充的地方"。
- 原始内容:在软件行业中,基于监控告警的信噪比很低,这往往会导致告警疲劳,即逐渐减少对所有告警的关注,因为其中有很多都是误报或者不需要操作甚至无用的告警。