知识卡片
依赖键路由先定分区
分区数规划要同时看预计吞吐和路由稳定性。若同一 key 的消息必须持续落在同一分区以维持处理顺序,扩分区可能改变哈希映射,让该键的新旧消息跨分区;因此应在建主题时结合可预见的增长预留容量,并用目标硬件压测检验,不能只按今天的吞吐取最小值。若业务弱依赖 key 的固定路由,又能方便地扩分区,初始预留可更保守。要求整个主题严格有序时,单分区可利用分区内顺序,但也限制了并行度。书中的“两年目标吞吐”是规划示例,预测期限仍应按业务变化速度选择。参见[[key决定分区稳定性]]、[[分区限定消息顺序]]。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《深入理解Kafka:核心设计与实践原理 2019》第4章《主题与分区》4.4.4「考量因素」(`_epub-src/OEBPS/Text/chapter5.xhtml`)
- 结论依据:正文先要求以同款硬件测试吞吐,再区分与 `key` 高关联和弱关联的应用:前者因扩分区可能失去同键顺序,宜预估未来需求;后者可依赖后续扩容。正文另指出单分区满足主题级顺序,规划期限仅作例示。
- 原始内容:如果分区的数量发生变化,那么有序性就得不到保证。在创建主题时,最好能确定好分区数……尤其对于与key高关联的应用,在创建主题时可以适当地多创建一些分区,以满足未来的需求……如果应用与key弱关联,并且具备便捷的增加分区数的操作接口,那么也可以不用考虑那么长远的目标。