知识卡片
逐阶段持久化增加管道负担
在每两个处理阶段间放持久队列,可以提供局部恢复点,却让每条事件多次经第三方落盘、传输并增加管理对象。调整拓扑还要协调旧中间队列,路由与部署代码可能超过实际业务逻辑。更高层拓扑把任务发现、消息传输与重试统一管理,价值是集中承担这些责任,并非消除故障和状态协议。
与[[队列解耦速度]]的联系:每阶段持久队列在恢复点之外也带来延迟和运维成本。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- · 查看原书依据
每个中间队列需要被管理和监控,并且添加了需要扩展的一层。
参考来源
- 位置:《大数据系统构建:可扩展实时数据系统构建原理与最佳实践》第14章《队列和流处理》(来源项目book-sources;源文件:extracted/大数据系统构建:可扩展实时数据系统构建原理与最佳实践/_epub-src/OEBPS/Text/103.xhtml)
- 结论依据:14.2.2逐项列出中间队列的延迟、吞吐、部署和运维代价,并引出Storm抽象。
- 原始内容:每个中间队列需要被管理和监控,并且添加了需要扩展的一层。