知识卡片

告警疲劳的形成机制

专业/工作 · 1214.c

内容

告警本该引起轻微的肾上腺素反应——”糟了,有问题了”,这是它作为信号存在的价值所在。但如果一周要经历这种反应十几次、持续数月,人就会对告警脱敏,响应速度下降、开始习惯性忽略、睡眠也受影响,这就是告警疲劳。危险地带恰恰不是告警特别多或特别少的极端,而是那种”收到大量告警,有些真需要处理、有些不需要,但还没到彻底不信任监控”的中间状态——这种状态最容易在不知不觉中把人拖入长期倦怠。发散:这提示告警系统设计的一个反直觉点——”看起来运转正常、只是有点吵”的中间态,其实比”告警彻底失效被无视”的状态更隐蔽地损耗团队。

参考来源

《监控运维实践 原则与策略-2021》第3章《告警、待命值班以及事件管理》