知识卡片
进度前移仍会重复
RocketMQ消费是至少一次:进度按最小偏移量提交,避免丢失却可能重复;重新负载时队列转给别的消费者,正在处理的消息也会被重复消费;返回RECONSUME_LATER时进度照样前移,重试的是一条属性相同、msgId全新的消息。所以业务幂等不能只靠msgId,要用业务键去重。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《RocketMQ技术内幕:RocketMQ架构设计与实现原理(第2版)》第5章《RocketMQ消息消费》(源文件:_epub-src/OEBPS/Text/000038.xhtml、_epub-src/OEBPS/Text/000043.xhtml)
- 结论依据:原文说明最小偏移量提交有重复消费风险、重新负载会导致重复消费,以及返回RECONSUME_LATER时进度照常前移、重试消息拥有新msgId;“幂等不能只靠msgId”为据此推出。
- 原始内容:这样能避免消息丢失,但同样有消息重复消费的风险。……导致原先分配给消费者的队列在负载之后分配给了别的消费者,那么消息会被重复消费……当消息监听器返回RECONSUME_LATER时,消息消费进度也会向前推进……RocketMQ会创建一条与原消息属性相同的消息,拥有一个唯一的新msgId