知识卡片
测试配合幂等修复纠正配置
集群越多,手工调整的配置越容易不一致。Prodtest 把单元测试框架用于真实服务:测试按依赖链执行,前一步失败就中止,直观显示哪个集群哪项配置有问题;每遇到别人配置错误造成的延误,就补一个测试。进一步给每个测试配修复程序,失败就修复再重测;修复必须幂等,才能每 15 分钟放心重跑。局限是测试与修复间的延迟会造成时好时坏的测试,不幂等的修复会让系统更乱。发散:先能检测,再谈自动修复。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 第7章 Google 的自动化系统的演进 · 查看原书依据
如果每一个修复程序都具有幂等性,并且假设所有的依赖关系都得到满足,那么修复问题就是简单而安全的。
参考来源
- 位置:《SRE:Google运维解密》第7章《Google 的自动化系统的演进》(源文件:`_epub-src/OEBPS/Text/0008_0005.xhtml`)
- 结论依据:原文描述 Prodtest 的依赖链测试与问题反馈机制、为测试配套幂等修复程序的做法,并反思不稳定测试与非幂等修复的缺陷。
- 原始内容:我们对Python单元测试框架进行了扩展,使其可以用来对实际服务进行单元测试……如果每一个修复程序都具有幂等性,并且假设所有的依赖关系都得到满足,那么修复问题就是简单而安全的。