知识卡片
优秀流框架门槛
内容
流处理框架必须同时压低延迟、提高吞吐,并在乱序、故障和状态变化下保持结果可靠。只会快速转发事件不够,业务真正需要的是实时性和一致性的组合。发散:速度一旦牺牲正确性,就只是监控面板上的幻觉。
参考来源
- 位置:《Flink原理与实践》第1章《大数据技术概述》(源文件:_epub-src/OEBPS/Text/chapter04.xhtml)
- 结论依据:原文围绕“为什么需要一个优秀的流处理框架”给出定义、流程、对比或限制条件,本卡片据此提炼其可迁移的框架机制,并补充了使用边界或工程启发。
- 原始内容:高速的5G通道传输到服务器,庞大的实时数据流将汹涌而至,流处理的需求肯定会爆炸式增长。 1.2.3 为什么需要一个优秀的流处理框架 处理实时流的系统通常被称为流计算框架、实时计算框架或流处理框架。下面就来解释为何需要一个可靠的流处理框架。 1.股票交易的业务场景 我们都知道股票交易非常依赖各类信息,……