知识卡片
再均衡有暂停与重读代价
消费组再均衡把分区所有权从一个消费者转给另一个,使成员增减后仍可继续分工;期间组内消费者暂时不能读取消息。若旧成员已处理消息却未提交相应位移,新成员接手后只能从已持久化位置恢复,那段消息会被重读。因此需要控制不必要的再均衡,并在所有权转移前尽可能保存已完成处理的进度。再均衡提供伸缩与故障恢复能力,但不保证处理状态自动随分区迁移。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《深入理解Kafka:核心设计与实践原理 2019》第3章《消费者》3.2.8「再均衡」(`_epub-src/OEBPS/Text/chapter4.xhtml`)
- 结论依据:正文定义分区所有权转移,说明再均衡期间不可读、消费者状态丢失以及未提交位移导致的重复消费。
- 原始内容:再均衡是指分区的所属权从一个消费者转移到另一消费者的行为……在再均衡发生期间,消费组内的消费者是无法读取消息的……原来被消费完的那部分消息又被重新消费一遍