返回主题:故障排查与根因分析

知识卡片

普通读书笔记卡 · 2821.e

两套线程池叠加超限

理解等级:未标注

上一案例的根因是:每天零点用 cat 切割日志,磁盘 I/O 等待达到 59%,打印日志被阻塞,线程池随之被撑大。Tomcat 线程池只设了 800,本不该超过 1024 的进程数上限;但服务同时配了 Dubbo 和用于降级的点对点 RPC,各自有线程池,部分服务自动降级、部分没有,两个线程池同时被撑满(800+800),就超过了上限。降级路径的资源也要算进总量。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《分布式服务架构:原理、设计与实战》第6章《Java服务的线上应急和技术攻关》(源文件:_epub-src/EPUB/text00015.html) - 结论依据:原文案例:凌晨零点日志切割用cat导致磁盘I/O等待达59%,打印日志被阻塞,线程池被撑大;Tomcat线程池设为800本不会超过1024,但服务同时配置Dubbo和用于降级的点对点RPC,各有独立线程池,部分服务自动降级、部分没降级时两个线程池都被撑满(800+800=1600),超过1024的限制。 - 原始内容:可见,问题发生时,CPU的I/O等待为59%。……一旦一部分服务切换到了点对点的RPC,而另一部分服务没有切换,就会导致两个线程池都被撑满,于是超过了1024的限制(800+800=1600),出现问题。