知识卡片
生产者分区决策路径
生产者先看 ProducerRecord.partition:若已指定,就直接使用该分区,不再由分区器计算。未指定时才走默认分区器。键非空时,分区器把键哈希到主题的全部分区之一;键为空时,轮询的是可用分区。这两个候选集合不同,不能把“自动分区”理解为统一的轮询。相同键在分区数不变时通常保持相同路由;扩分区后映射可能变化,见 [[key决定分区稳定性]]。
结构图:
flowchart TD
A[准备发送记录] --> B{显式指定分区?}
B -- 是 --> C[使用指定分区]
B -- 否 --> D{键是否为空?}
D -- 否 --> E[键哈希映射到全部分区]
D -- 是 --> F[轮询可用分区]
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《深入理解Kafka:核心设计与实践原理 2019》第2章《生产者》2.1.4「分区器」(源文件:`_epub-src/OEBPS/Text/chapter3.xhtml`)
- 结论依据:原文明确指定 `partition` 时跳过分区器,并区分默认分区器对非空键哈希和空键轮询的分支,特别指出前者的目标是所有分区,后者是可用分区。
- 原始内容:如果消息ProducerRecord中指定了partition字段,那么就不需要分区器的作用,因为partition代表的就是所要发往的分区号。 如果消息ProducerRecord中没有指定partition字段,那么就需要依赖分区器,根据key这个字段来计算partition的值。……如果 key 不为 null,那么计算得到的分区号会是所有分区中的任意一个;如果 key为null,那么计算得到的分区号仅为可用分区中的任意一个