知识卡片
分配后恢复外存位移
若消费位移由应用保存在数据库等外部介质,再均衡监听器可把分区交接与进度恢复连接起来:旧成员在 onPartitionsRevoked 中保存已处理位移,新成员在 onPartitionsAssigned 中按新分配的分区读取外存位移并 seek()。这样每次分配完成都能重新定位,而不只在进程启动时定位一次。书中给出的是流程伪代码;外存读写失败、业务状态与位移提交的一致性仍需应用自行设计。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《深入理解Kafka:核心设计与实践原理 2019》第3章《消费者》3.2.8「再均衡」(`_epub-src/OEBPS/Text/chapter4.xhtml`;外存监听器示例图 `94_2.jpg`)
- 结论依据:正文说明监听器可配合外部位移存储;代码在撤销回调保存位移、分配回调从数据库读取并 `seek()`。
- 原始内容:再均衡监听器还可以配合外部存储使用……这里可以通过再均衡监听器查找分配到的分区的消费位移,并且配合 seek()方法来进一步优化代码逻辑