知识卡片
持续阈值会漏掉瞬时尖峰
“指标连续超阈值数分钟才告警”能减少噪声,却会漏掉周期性短尖峰。一次只持续几秒的CPU暴涨仍可能造成请求超时。应同时保留更细粒度采样、峰值或变化率规则,并在异常窗口关联进程级性能证据,避免平均值掩盖真实故障。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《高性能之道:SRE视角下的运维架构实践》第3章《浅谈监控系统设计》(源文件:`_epub-src/EPUB/xhtml/Section0001_0009.xhtml`)
- 结论依据:原文案例中 Go 服务 CPU 每几十秒短暂升至约1400%,因未持续数分钟而没有告警,最终用 perf 定位到 mallocgc,直接证明持续阈值的盲区。
- 原始内容:Go服务器CPU(16C/32GB)每几十秒内会出现一次极高的波动,从300%的CPU使用率飙升到1400%左右,但是只持续几秒……没有触发监控报警的逻辑,监控报警的规则一般是连续几分钟CPU使用率超过多少。