知识卡片
分区首尾位移会移动
endOffsets(partitions) 返回各分区末尾的下一写入位置,不能当成最后一条现存消息的 offset;若最后一条为 8,末尾位置是 9。beginningOffsets(partitions) 返回当前可读取的起始位置,日志清理后可能不再是 0。取得这些位置后可用 seek() 定位,也可用 seekToBeginning()、seekToEnd() 直接指定分区首尾。希望从头重读时,应理解“头”是当前保留数据的起点;希望从末尾读时,应理解当前旧消息会被跳过。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《深入理解Kafka:核心设计与实践原理 2019》第3章《消费者》3.2.7「指定位移消费」(`_epub-src/OEBPS/Text/chapter4.xhtml`;图 `86_2.jpg`、`89_1.jpg`–`89_4.jpg`)
- 结论依据:正文解释 `endOffsets()` 对应下一条将写入的位置、日志清理使起始位置增加,并列出两种直接定位首尾的方法。
- 原始内容:这里获取的不是8,是将要写入最新消息的位置……一个分区的起始位置起初是0,但并不代表每时每刻都为0,因为日志清理的动作会清理旧的数据……KafkaConsumer中直接提供了seekToBeginning()方法和seekToEnd()方法