返回主题:顺序保证与延时消息

知识卡片

专业/工作

传输保障取决于顺序

理解等级:未标注

消息保障分为至多一次(允许丢失、不重复)、至少一次(不丢失、允许重复)与恰好一次(既不丢也不重复)。消费端的保障取决于处理消息与提交位移的先后。先处理、后提交:若处理成功后进程在提交前宕机,恢复时仍从旧位移读取,产生重复处理。先提交、后处理:若提交后在处理前宕机,恢复时会跳过尚未处理的消息,形成丢失。这是对位移与处理顺序的分析,不能把“成功写入 broker”单独当作端到端恰好一次;还需考虑生产者重试和业务处理。参见 [[提交时机决定语义]]。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《深入理解Kafka:核心设计与实践原理 2019》第7章《深入客户端》7.4.1 节(源文件:`_epub-src/OEBPS/Text/chapter8.xhtml`) - 结论依据:原文分别推演先处理后提交、先提交后处理的宕机窗口,并说明生产者重试也可能重复写入。 - 原始内容:如果消费者在拉取完消息之后,应用逻辑先处理消息后提交消费位移,那么在消息处理之后且在位移提交之前消费者宕机了,待它重新上线之后,会从上一次位移提交的位置拉取,这样就出现了重复消费