返回主题:拉取、积压与消费能力:拉得动吗

知识卡片

普通读书笔记卡

代理容量随消费者数增长

理解等级:中级

书中的 REST Proxy 为每个消费会话维护一个消费者对象和消息缓存,因此消费者实例数是估算代理内存与线程负荷的关键变量。生产者可池化,不能用生产者请求量直接推算同样的常驻对象数。容量规划应先限定可同时存在的消费者实例,再结合每实例缓冲、单次消费响应上限、压缩/序列化 CPU 和 HTTP 并发做压力测试。书中“每实例 16MB、至少 16 核、1GB 堆”等属于旧版本示例和建议,不能脱离消息大小、配置与负载直接套用;消费者空闲销毁策略也会改变峰值。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《深入理解Kafka:核心设计与实践原理 2019》第11章 11.7.3 节(`_epub-src/OEBPS/Text/chapter12.xhtml`)。 - 结论依据:原文把内存占用与消费者实例数、对象和响应前缓存相连,并对比生产者池化,随后列出 CPU、网络和 JVM 的部署考虑;具体容量数字有版本与负载条件。 - 原始内容:Kafka REST Proxy的内存占用大小与创建的消费者实例数量有直接关系,消费者具有状态的这个特性让其需要维护在Kafka REST Proxy中。