知识卡片
重分配先增后删副本
分区重分配不是瞬间更改副本名单。控制器先把目标节点上的新副本加入分区,临时增加副本数;新副本从 leader 复制日志,追上后才移除旧副本,恢复原副本数。这个顺序让目标副本先取得数据再退出旧位置,也解释了为何迁移期间需要足够磁盘空间,并会占用网络与磁盘带宽。重分配完成后,leader 分布仍可能倾斜,必要时另做优先副本选举。
结构图:
flowchart LR
A[原副本分布] --> B[添加目标节点新副本]
B --> C[从 leader 同步日志]
C --> D[移除旧副本]
D --> E[恢复原副本数]
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《深入理解Kafka:核心设计与实践原理 2019》第4章《主题与分区》4.3.2「分区重分配」(`_epub-src/OEBPS/Text/chapter5.xhtml`;迁移前后副本与 leader 分布 `150_1.jpg`、`152_2.jpg`、`153_1.jpg`)
- 结论依据:正文明确控制器添加新副本、复制数据、删除旧副本的顺序与空间要求;示例显示重分配后还需另行平衡 leader。
- 原始内容:分区重分配的基本原理是先通过控制器为每个分区添加新副本(增加副本因子),新的副本将从分区的leader副本那里复制所有的数据……在复制完成之后,控制器将旧副本从副本清单里移除(恢复为原先的副本因子数)。注意在重分配的过程中要确保有足够的空间。