知识卡片
优先尝试自动修复而非直接告警人类
内容
如果一条告警最常见的响应是执行一系列已知、有记录的固定步骤,就该让计算机自己执行这些步骤,而不是把人从睡梦中叫醒去手动操作——尤其在管理大规模环境时,靠增加人力来应对重复性故障的成本远高于把修复逻辑写成脚本。典型做法是把标准化修复操作实现为代码,由监控系统在发现问题时先尝试执行,只有自动修复未能解决问题时才真正升级为人工告警。这与[[手动配置是自动化缺失的信号]]呼应:运行手册里那些”复制粘贴命令”式的步骤,恰恰是最适合被封装成自动修复脚本的候选对象。
参考来源
《监控运维实践 原则与策略-2021》第3章《告警、待命值班以及事件管理》