知识卡片

普通读书笔记卡

批次可按分区遍历

理解等级:中级

poll 返回的 ConsumerRecords<K,V> 是消息集:可以用迭代器逐条处理,也可以先调用 partitions() 找到本批涉及的分区,再用 records(TopicPartition) 逐分区处理。这使每个分区的处理进度更容易单独统计,后续手动提交分区位移时尤其有用。类还提供 records(String topic) 按主题取消息,但没有与 partitions() 对应的 topics();按主题遍历时,示例使用订阅时保存的主题列表。按分区或主题分组只改变应用遍历批次的方式,并不改变消费者的订阅范围。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《深入理解Kafka:核心设计与实践原理 2019》第3章《消费者》3.2.4「消息消费」(源文件:`_epub-src/OEBPS/Text/chapter4.xhtml`;方法及示例图 `73_2.jpg`、`74_1.jpg`–`74_4.jpg`) - 结论依据:原文分别展示消息集的迭代器、按分区与按主题访问方法,解释分区遍历与手动位移提交的关联,并明确没有 `topics()` 方法。 - 原始内容:poll()方法的返回值类型是 ConsumerRecords,它用来表示一次拉取操作所获得的消息集,内部包含了若干ConsumerRecord……ConsumerRecords类提供了一个records(TopicPartition)方法来获取消息集中指定分区的消息……ConsumerRecords 类中并没提供与 partitions()类似的 topics()方法