知识卡片
延时服务需要背压
DelayService 从内部延时主题拉取消息,暂存到本地 DelayQueue,待再次投递时间到达后送往真实主题。如果未到期消息大量堆积而仍持续拉取,本地内存会增长;书中的保护办法是按分区计数,达到阈值便暂停该分区拉取。DelayQueue 按到期时间排序仍有必要:同一延时等级的单个分区内有序,多个分区之间却不保证到期时间有序。比如分区 A 的下一条在 30 秒到期、分区 B 的一条在 5 秒到期,服务应先发送 B;这是假设场景,用于解释跨分区排序。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《深入理解Kafka:核心设计与实践原理 2019》第11章《高级应用》11.2 节及图 11-4(源文件:`_epub-src/OEBPS/Text/chapter12.xhtml`;图片:`_epub-src/OEBPS/Images/381_2.jpg`)
- 结论依据:原文明确说明按分区计数并暂停拉取以限制本地队列内存,还解释 DelayQueue 对跨分区到期时间排序的作用;图 11-4 核对拉取、暂存、转发的线程路径。
- 原始内容:为了保障内部 DelayQueue 不会因为未处理的消息过多而导致内存的占用过大,DelayService 会对主题中的每个分区进行计数,当达到一定的阈值之后,就会暂停拉取该分区中的消息。