知识卡片
监控配置即代码且松耦合
监控系统和其他服务一样重要,应得到同样的关注。
配置即代码:把监控配置存进版本控制——有变更历史、能关联任务、易回滚、可做静态检查(如用 promtool 校验 Prometheus 配置)、强制代码审查。优先选支持基于意图的配置的系统,而不是只有 Web UI 或 CRUD API 的系统;grafanalib 等工具能让传统靠 UI 配置的组件也用代码配置。
鼓励一致性:大公司要在集中统一与团队自主之间平衡。Google 逐步收敛到一个作为服务集中运行的单一框架:工程师换团队后上手更快,排障协作更容易;集中的仪表板服务让各团队的仪表板可发现、可访问,看懂别人的仪表板就能更快排障。尽量让基础监控零成本:所有服务通过公共库(如 OpenCensus、Istio 服务网格)导出一致的基础指标,自动采集并提供统一仪表板,新组件一上线就有监控,非工程团队也能用。
首选松耦合:业务和系统一年后都会变,监控也要随之演进。收集、存储、告警、可视化由不同组件负责,之间是稳定接口,便于替换。开源界的趋势:从 Zabbix 式一体化,到 Prometheus(采集与规则评估)+ InfluxDB(长期存储)+ Alertmanager(告警汇总)+ Grafana(仪表板)。指标暴露的开放标准有 statsd 和 Prometheus(已标准化为 OpenMetrics)。
Google 的例子:旧系统 Borgmon 把仪表板和告警规则放在同一配置中;迁移到 Monarch 时,把仪表板拆成独立服务 Viceroy——它能同时展示两个系统的数据,用户得以逐步迁移,Monarch 也少了一些功能需求。
译文提示:本书为社区机器辅助译本,本卡按上下文和官方英文版理解,引文保留中文原样。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
在整书笔记中的位置
- · 第4章 监控
原书出处 · 1 处
- 第4章 监控 · 查看原书依据
我们建议使监控系统的组件保持松散耦合。