知识卡片
批流结果合并先对齐时间边界
历史窗口结果与实时小窗口结果合并前,须确定每份结果覆盖的起止时间、窗口步长和层标识。以统一时间边界对齐只是第一步,还要保证两侧没有重叠或缺口,并核验迟到事件、重算替换和重复写入。书中示例展示了按步长取整和分层存储的意图,但代码与 SQL 有可疑处,不能直接当作正确实现。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《实时流计算系统设计与实现》第7章7.3.2《Kappa架构实例》(源文件:_epub-src/OEBPS/Text/chapter125.xhtml)
- 结论依据:正文在写库示例中说明按步长取整以对齐窗口,并分别存储两层结果再合并;示例中最大时间戳却使用 Math.min,且查询区间需进一步验算。
- 原始内容:通过对滑动或翻滚的步长取整,以对齐时间窗口,从而方便后续合并离线部分和实时部分的计算结果