知识卡片
消息系统的设计选择
评估消息系统可以问两个问题。一,生产者比消费者快怎么办:丢弃消息、放入缓冲队列,或用背压阻塞生产者,Unix 管道和 TCP 用的就是背压;若缓冲,还要问队列超出内存时是崩溃还是写磁盘,以及对性能的影响。二,节点崩溃或掉线会不会丢消息:取决于写磁盘、复制等持久性投入,而持久性有代价。能接受偶尔丢失的场景,如周期性传感器读数,可换来更高吞吐和更低延迟;事件计数这类场景则必须可靠送达。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
- · 第十一章:流处理
原书出处 · 1 处
- 第十一章:流处理 · 查看原书依据
如果生产者发送消息的速度比消费者能够处理的速度快会发生什么?
参考来源
- 位置:《数据密集型应用系统设计》第十一章《流处理》"消息传递系统"(源文件:_epub-src/ch11_split_002.html)
- 结论依据:原文提出区分消息传递系统的两个关键问题(生产者过快时的丢弃/缓冲/背压选择,节点故障时的消息丢失与持久性代价),并说明是否接受消息丢失取决于应用场景(传感器读数 vs 事件计数),直接支撑本卡片结论。
- 原始内容:如果生产者发送消息的速度比消费者能够处理的速度快会发生什么?……如果节点崩溃或暂时脱机,会发生什么情况?……是否可以接受消息丢失取决于应用。