知识卡片
监控规则也要模板化测试
监控配置把规则定义与收集目标分开,同一套规则可用于许多目标;再用类似宏的模板做成可复用规则库,进一步减少重复和出错。最常见的两类模板:把某个代码库(HTTP 服务器、RPC 框架等)暴露的指标整体模板化,用这个库的服务自动获得监控;按部署模型把单实例数据逐级汇总到全局。规则还有单元测试和回归测试,用合成数据验证,配置经持续集成测试后统一分发。目标是监控维护成本随规模非线性增长。发散:监控配置也是代码。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 第10章 基于时间序列数据进行有效报警 · 查看原书依据
这种分离机制可能看起来没有那么重要,但是却极大降低了监控系统配置文件的维护要求。 Borgmon同时支持语言级别的模板。Borgmon提供一种类似于宏的模板机制,允许用户创造出一些可重用的规则库,进一步减小了配置文件中的重复程度,降低配置文件出错的可能性。 当然,任何高级编程语言环境中都难以避免复杂程序出现Bug,Borgmon为此提供了针对Borgmon规则的单元测试和回归测试工具。通过使用这些工具,以及一些合成的time-series数据,我们可以确保每条Borgmon规则都是正确的。
参考来源
- 位置:《SRE:Google运维解密》第10章《基于时间序列数据进行有效报警》(源文件:`_epub-src/OEBPS/Text/0009_0001.xhtml`)
- 结论依据:原文说明规则与目标分离、宏模板、两类常见模板库、规则单元测试与持续集成分发,并强调监控维护成本应与规模非线性相关。
- 原始内容:Borgmon同时支持语言级别的模板。Borgmon提供一种类似于宏的模板机制,允许用户创造出一些可重用的规则库,进一步减小了配置文件中的重复程度,降低配置文件出错的可能性。