知识卡片
GC死亡螺旋:资源相互依赖的级联恶化
系统资源常存在隐蔽的正反馈依赖:未调优 GC 参数的 Java 前端在高负载下 CPU 不足,导致请求变慢、 处理数增多、内存上升,压缩缓存空间令命中率下降,更多请求转发到后端消耗其 CPU,最终触发健康 检查失败并连锁故障。CPU 减少还会让垃圾回收更频繁,回收本身又耗 CPU,形成”GC死亡螺旋”。最 棘手之处在于,表层症状和真正根源隔着多层因果链,前后端由不同团队运维时几乎无法临场还原。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 第22章 处理连锁故障 · 查看原书依据
任务崩溃 例如,某任务可能会因为超过资源限制而被容器管理器驱逐(VM或者其他的),或者程序自身逻辑会触发崩溃。 Java 垃圾回收(GC)速率加快,从而导致CPU使用率上升 一个糟糕透顶的场景:由于CPU资源减少,请求处理速度变慢,内存使用率上升,导致GC触发次数增多,导致CPU资源的进一步减少。我们将此称之为“GC死亡螺旋”。 缓存命中率下降 可用内存的减少可能会导致应用层缓存的命中率降低,导致向后端发送更多的RPC,可能会导致后端任务过载。 线程 线程不足可能会导致错误或者导致健康检查失败。
参考来源
- 位置:《SRE:Google运维解密》第22章《处理连锁故障》"资源之间的相互依赖"一节(源文件:_epub-src/OEBPS/Text/0009_0013.xhtml)
- 结论依据:原文给出九步因果链示例("某Java前端服务器GC参数没有被调优"→CPU不足→请求变慢→内存上升→缓存命中率下降→后端CPU/线程不足→触发连锁故障),并明确定义"由于CPU资源减少,请求处理速度变慢,内存使用率上升,导致GC触发次数增多,导致CPU资源的进一步减少……我们将此称之为'GC死亡螺旋'"。
- 原始内容:一个糟糕透顶的场景:由于CPU资源减少,请求处理速度变慢,内存使用率上升,导致GC触发次数增多,导致CPU资源的进一步减少。我们将此称之为"GC死亡螺旋"……尤其是在前端和后端由不同团队运维时,判断后端崩溃是由于前端缓存命中率下降可能非常困难。