返回主题:拉取、积压与消费能力:拉得动吗

知识卡片

普通读书笔记卡

凑够拉取量也要设等待上限

理解等级:中级

fetch.min.bytes 指定服务端响应一次拉取请求前希望积累的最小数据量;调大可减少小批次响应、提高吞吐,但低流量时会增加等待。fetch.max.wait.ms 给这种等待设置上限,避免达不到最小数据量就一直不返回。调参时应把两者一起看:吞吐优先可接受更大批次与等待,低延迟场景则不能只调高最小字节数。书中 Kafka 2.0.0 语境的默认值分别为 1 B 和 500 ms,实际部署应按所用版本核对。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《深入理解Kafka:核心设计与实践原理 2019》第3章《消费者》3.2.11「重要的消费者参数」(`_epub-src/OEBPS/Text/chapter4.xhtml`) - 结论依据:正文分别说明最小拉取字节数的吞吐与延迟取舍,以及最大等待时间防止低流量时一直阻塞。 - 原始内容:可以适当调大这个参数的值以提高一定的吞吐量,不过也会造成额外的延迟……如果Kafka仅仅参考fetch.min.bytes参数的要求,那么有可能会一直阻塞等待……fetch.max.wait.ms参数用于指定Kafka的等待时间