知识卡片
阈值告警疲劳
内容
静态阈值告警常把正常波动当故障，也会漏掉低流量但高影响的问题。告警太多会训练团队忽视告警。SLO用错误预算衡量用户受损程度，让告警更接近需要人介入的时刻。
参考来源
- 位置：《可观测性工程》第12章《使用SLO来提高可靠性》"12.1 传统监控方法造成危险的告警疲劳"及"12.2 阈值告警只适用于'已知的未知'情况"一节（源文件：_epub-src/OEBPS/024.xhtml）
- 结论依据：原文明确"基于监控告警的信噪比很低，这往往会导致告警疲劳，即逐渐减少对所有告警的关注"，并说明"静态阈值过于僵硬和粗糙，不能可靠地表明动态环境中的用户体验下降……这就是SLO可以帮助补充的地方"。
- 原始内容：在软件行业中，基于监控告警的信噪比很低，这往往会导致告警疲劳，即逐渐减少对所有告警的关注，因为其中有很多都是误报或者不需要操作甚至无用的告警……静态阈值过于僵硬和粗糙，不能可靠地表明动态环境中的用户体验下降，它们没办法做到上下文关联。可靠的告警需要更精细的颗粒度和可靠性，这就是SLO可以帮助补充的地方。