知识卡片
当前位置可不同于提交位置
同一分区要区分三个位置:lastConsumedOffset 是最近已处理消息的偏移量,position 是消费者下一条将拉取的位置,committed offset 是已持久化的恢复位置。若处理完偏移量 377 的消息并立即成功提交,示例中 position 与 committed offset 都是 378,即 [[提交的是下一位移]] 所说的加一。这个相等关系只属于该示例;继续拉取而尚未提交时,position 可以前进,committed offset 仍停留在旧值。排查重复消费时应分别查看当前拉取进度和持久化恢复点。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《深入理解Kafka:核心设计与实践原理 2019》第3章《消费者》3.2.5「位移提交」(源文件:`_epub-src/OEBPS/Text/chapter4.xhtml`;图 3-6 `76_1.jpg`、方法图 `76_2.jpg`、输出图 `77_2.jpg`)
- 结论依据:原文分别定义消费到的位置、下一次拉取位置和已提交位置;示例输出 377/378/378,且原文明确说 `position` 与 `committed offset` 不会一直相同。
- 原始内容:在消费者中还有一个committed offset的概念,它表示已经提交过的消费位移。……在本示例中,position=committed offset=lastConsumedOffset+1,当然position和committed offset并不会一直相同