知识卡片

普通读书笔记卡

分配后恢复外存位移

理解等级:高级

若消费位移由应用保存在数据库等外部介质,再均衡监听器可把分区交接与进度恢复连接起来:旧成员在 onPartitionsRevoked 中保存已处理位移,新成员在 onPartitionsAssigned 中按新分配的分区读取外存位移并 seek()。这样每次分配完成都能重新定位,而不只在进程启动时定位一次。书中给出的是流程伪代码;外存读写失败、业务状态与位移提交的一致性仍需应用自行设计。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《深入理解Kafka:核心设计与实践原理 2019》第3章《消费者》3.2.8「再均衡」(`_epub-src/OEBPS/Text/chapter4.xhtml`;外存监听器示例图 `94_2.jpg`) - 结论依据:正文说明监听器可配合外部位移存储;代码在撤销回调保存位移、分配回调从数据库读取并 `seek()`。 - 原始内容:再均衡监听器还可以配合外部存储使用……这里可以通过再均衡监听器查找分配到的分区的消费位移,并且配合 seek()方法来进一步优化代码逻辑