知识卡片

普通读书笔记卡 · 3107.a

Kappa用流统一批与增量

理解等级:未标注

Lambda 的批处理层与快速处理层若用两套技术实现同一业务逻辑,会增加开发、测试和运维成本。Kappa 尝试让历史数据重算和实时增量都使用流处理接口,复用大体相同的处理逻辑;输入存储可按场景选择,不必把历史数据全放在消息队列。统一引擎并不保证只改窗口参数即可上线,还需核对重放范围、结果合并、算法库成熟度与团队能力。[[Lambda架构三层职责]]仍是另一种可用方案。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《实时流计算系统设计与实现》第7章7.3–7.4《Kappa架构与本章小结》(源文件:_epub-src/OEBPS/Text/chapter123.xhtml、_epub-src/OEBPS/Text/chapter124.xhtml、_epub-src/OEBPS/Text/chapter126.xhtml;图7-3) - 结论依据:正文指出两套实现的维护成本,给出以流处理统一历史与增量的思路;结语强调 Kappa 并非总优于 Lambda。 - 原始内容:Kappa架构的核心思路是将批处理层用快速处理层的流计算技术替换。