知识卡片

网络设备CPU内存指标噪音大不宜直接告警

专业/工作 · 1220.h

内容

网络设备(交换机、路由器)的CPU和内存使用率图表容易转移注意力,因为它们的”正常”范围往往比服务器更极端也更难预测——书中提到有一组机架交换机CPU使用率每隔几分钟就在1%到100%之间来回跳动,而另一台交换机长期以100% CPU运行,两者都被厂商确认为正常状态。这些指标该被绘制出来供诊断参考,但不该在没有厂商明确建议的情况下设置告警,这与[[操作系统标准指标该被记录但不该被直接告警]]的判断是同一原则,只是网络设备场景下”正常波动范围”的离谱程度更加极端。另外容易被忽视的是:不少线路卡、管理卡自带独立的CPU和内存,即便整机看起来空闲,某张卡上的资源也完全可能被耗尽,因此要确保监控覆盖设备内的所有CPU/内存实例,而不只是看整机汇总数字。

参考来源

《监控运维实践 原则与策略-2021》第9章《网络监控》