知识卡片

维护周期屏蔽告警要避免过度沉默

专业/工作 · 1214.e

内容

对预期会触发告警的计划性维护操作,应该把对应告警放进维护周期临时屏蔽,避免无意义的干扰——尤其是团队其他人不会立即知道是你主动触发的这种情况。但屏蔽的范围必须谨慎控制:大范围、无差别的静默经常会掩盖维护操作意外触发的、此前未知的依赖关系问题,而这类”事先不知道的依赖被维护操作带崩”的信息其实很有价值,说明基础设施里存在没被记录的耦合。发散:维护窗口的屏蔽策略本质是在”减少噪音”和”保留意外信号”之间取舍,屏蔽范围应该刚好覆盖预期受影响的部分,而不是图省事一键静音所有相关告警。

参考来源

《监控运维实践 原则与策略-2021》第3章《告警、待命值班以及事件管理》