知识卡片
真实演练验证依赖假设
架构文档声称“任一分片故障不影响服务”,并不能证明故障隔离成立。只有在接近真实运行的环境中关闭节点、制造超时或切断弱依赖,才能验证依赖强弱、超时、降级和故障转移是否按设计工作。测试环境通过也可能遗漏线上拓扑与状态差异。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《高性能之道:SRE视角下的运维架构实践》第10章《故障演练与应急预案》(源文件:`_epub-src/EPUB/xhtml/Section0001_0017.xhtml`)
- 结论依据:原文以自研Redis分片在测试通过但单节点宕机导致全业务瘫痪为例,并提出用演练验证强弱依赖、降级和故障转移。
- 原始内容:号称不论任何一个分片出现异常,服务仍然可以正常使用……一个Redis节点的主机宕机,其中一个分片的离线导致了整个业务瘫痪,而这个逻辑在测试环境下被验证过,但没有进行线上演练。