知识卡片
Kappa用流统一批与增量
Lambda 的批处理层与快速处理层若用两套技术实现同一业务逻辑,会增加开发、测试和运维成本。Kappa 尝试让历史数据重算和实时增量都使用流处理接口,复用大体相同的处理逻辑;输入存储可按场景选择,不必把历史数据全放在消息队列。统一引擎并不保证只改窗口参数即可上线,还需核对重放范围、结果合并、算法库成熟度与团队能力。[[Lambda架构三层职责]]仍是另一种可用方案。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《实时流计算系统设计与实现》第7章7.3–7.4《Kappa架构与本章小结》(源文件:_epub-src/OEBPS/Text/chapter123.xhtml、_epub-src/OEBPS/Text/chapter124.xhtml、_epub-src/OEBPS/Text/chapter126.xhtml;图7-3)
- 结论依据:正文指出两套实现的维护成本,给出以流处理统一历史与增量的思路;结语强调 Kappa 并非总优于 Lambda。
- 原始内容:Kappa架构的核心思路是将批处理层用快速处理层的流计算技术替换。