知识卡片

普通读书笔记卡 · 3107.c

批流结果合并先对齐时间边界

理解等级:高级

历史窗口结果与实时小窗口结果合并前,须确定每份结果覆盖的起止时间、窗口步长和层标识。以统一时间边界对齐只是第一步,还要保证两侧没有重叠或缺口,并核验迟到事件、重算替换和重复写入。书中示例展示了按步长取整和分层存储的意图,但代码与 SQL 有可疑处,不能直接当作正确实现。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《实时流计算系统设计与实现》第7章7.3.2《Kappa架构实例》(源文件:_epub-src/OEBPS/Text/chapter125.xhtml) - 结论依据:正文在写库示例中说明按步长取整以对齐窗口,并分别存储两层结果再合并;示例中最大时间戳却使用 Math.min,且查询区间需进一步验算。 - 原始内容:通过对滑动或翻滚的步长取整,以对齐时间窗口,从而方便后续合并离线部分和实时部分的计算结果