知识卡片

普通读书笔记卡

缺失越界触发位移重置

理解等级:中级

本书对应的 Kafka 客户端在找不到消费组已提交位移时,才用 auto.offset.reset 决定起点;已有有效提交位移时,改这个参数不会让消费者从头重读。书中默认值 latest 从分区末尾的下一写入位置开始,earliest 从当前可用的最早位置开始;最早位置可能因日志清理而大于 0。配置 none 且缺位移时抛 NoOffsetForPartitionException,便于让应用显式处理缺失进度。提交位移越界也会触发重置策略;要主动指定有效位移,应使用 seek()。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《深入理解Kafka:核心设计与实践原理 2019》第3章《消费者》3.2.7「指定位移消费」(`_epub-src/OEBPS/Text/chapter4.xhtml`;图 `86_2.jpg`、越界示例 `91_1.jpg`) - 结论依据:正文列出缺失位移、越界两类触发条件,以及 `latest`、`earliest`、`none` 的行为;后文说明日志清理使起始位置上移。 - 原始内容:每当消费者查找不到所记录的消费位移时,就会根据消费者客户端参数auto.offset.reset的配置来决定从何处开始进行消费……除了查找不到消费位移,位移越界也会触发 auto.offset.reset 参数的执行……如果能够找到消费位移,那么配置为“none”不会出现任何异常