← 返回刚才阅读的位置

知识卡片

普通读书笔记卡 · 1574.c.2

监控配置即代码且松耦合

理解等级:中级

监控系统和其他服务一样重要,应得到同样的关注。

配置即代码:把监控配置存进版本控制——有变更历史、能关联任务、易回滚、可做静态检查(如用 promtool 校验 Prometheus 配置)、强制代码审查。优先选支持基于意图的配置的系统,而不是只有 Web UI 或 CRUD API 的系统;grafanalib 等工具能让传统靠 UI 配置的组件也用代码配置。

鼓励一致性:大公司要在集中统一与团队自主之间平衡。Google 逐步收敛到一个作为服务集中运行的单一框架:工程师换团队后上手更快,排障协作更容易;集中的仪表板服务让各团队的仪表板可发现、可访问,看懂别人的仪表板就能更快排障。尽量让基础监控零成本:所有服务通过公共库(如 OpenCensus、Istio 服务网格)导出一致的基础指标,自动采集并提供统一仪表板,新组件一上线就有监控,非工程团队也能用。

首选松耦合:业务和系统一年后都会变,监控也要随之演进。收集、存储、告警、可视化由不同组件负责,之间是稳定接口,便于替换。开源界的趋势:从 Zabbix 式一体化,到 Prometheus(采集与规则评估)+ InfluxDB(长期存储)+ Alertmanager(告警汇总)+ Grafana(仪表板)。指标暴露的开放标准有 statsd 和 Prometheus(已标准化为 OpenMetrics)。

Google 的例子:旧系统 Borgmon 把仪表板和告警规则放在同一配置中;迁移到 Monarch 时,把仪表板拆成独立服务 Viceroy——它能同时展示两个系统的数据,用户得以逐步迁移,Monarch 也少了一些功能需求。

译文提示:本书为社区机器辅助译本,本卡按上下文和官方英文版理解,引文保留中文原样。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    参考来源

    - 位置:《谷歌站点可靠性工作手册》第04章《第4章 监控》4 管理您的监控系统(源文件:extracted/谷歌站点可靠性工作手册/_epub-src/OEBPS/Text/09.html,来源项目 book-sources) - 结论依据:第4章管理监控系统一节主张监控配置即代码并优先基于意图的配置,介绍Google集中统一框架与零成本基础监控以鼓励一致性,主张收集、存储、告警、可视化松耦合,并以Borgmon迁移Monarch时拆出Viceroy仪表板支持渐进迁移为例。 - 原始内容:我们建议使监控系统的组件保持松散耦合。