知识卡片

普通读书笔记卡

元数据确定手动分区

理解等级:中级

手动消费指定分区时,assign 接收一组 TopicPartition;每个对象用主题名和分区编号唯一指明一个分区。若事先不知道主题的分区数,可以先用 partitionsFor(topic) 查询各分区的 PartitionInfo,再把其中的主题名、分区编号转换成 TopicPartition 集合传给 assign。PartitionInfo 还提供 leader、所有副本、同步副本及离线副本等元数据;这些信息用于了解分区位置与副本状态,不能把 PartitionInfo 对象直接当成 assign 的参数。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《深入理解Kafka:核心设计与实践原理 2019》第3章《消费者》3.2.2「订阅主题与分区」(源文件:`_epub-src/OEBPS/Text/chapter4.xhtml`;类型与代码图 `65_1.jpg`–`66_3.jpg`) - 结论依据:原文给出 `assign(Collection<TopicPartition>)`、`partitionsFor(String)` 与两个类型的属性,并用示例遍历查询结果生成分区集合。 - 原始内容:TopicPartition类只有2个属性:topic和partition,分别代表分区所属的主题和自身的分区编号……KafkaConsumer 中的partitionsFor()方法可以用来查询指定主题的元数据信息……其中PartitionInfo类型即为主题的分区元数据信息,此类的主要结构如下: