知识卡片

普通读书笔记卡

幂等基于序列号

理解等级:未标注

本书 Kafka 2.0.0 的生产者幂等用 PID(每个生产者实例获得的标识)和每个分区各自递增的序列号识别重试。同一 PID、同一分区,broker 只接收紧接已记录序列号的下一条;旧号视为重试重复,跳号则表示前面的写入缺失并报错。例如 broker 已记到 7,重试 7 不再新增记录,8 可以接收,直接到 10 则有缺口。

边界是单次生产者会话内的单分区写入。两条内容相同但序列号不同的消息仍是两条消息;跨生产者会话、跨分区的原子写入不能仅靠这一机制保证。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《深入理解Kafka:核心设计与实践原理 2019》第7章《深入客户端》7.4.2 节(源文件:`_epub-src/OEBPS/Text/chapter8.xhtml`) - 结论依据:原文给出 PID、每个 `<PID,分区>` 的序列号,以及 broker 对下一个号、旧号和跳号的三种处理;数字 7/8/10 是依该规则作的教学示例。 - 原始内容:broker端会在内存中为每一对<PID,分区>维护一个序列号。对于收到的每一条消息,只有当它的序列号的值(SN_new)比broker端中维护的对应的序列号的值(SN_old)大1(即SN_new=SN_old+1)时,broker才会接收它。