返回主题:Lambda架构与数据系统分层

此卡片不在当前主题的阅读序列中,可返回主题继续阅读。

知识卡片

普通读书笔记卡 · 3092

流关联操作为什么容易变慢

理解等级:未标注

流关联把两条流中满足条件的元素组合成新元素。除受限的一对一场景外,通常需要用时间窗口限定可配对的数据;窗口越长、状态越多,宽泛条件又会增加计算量,结果可能无法满足实时要求。先确定业务允许的时间范围,再估算窗口状态与匹配开销;短窗口和可放入内存的数据量更有利于快速关联。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《实时流计算系统设计与实现》第4章4.2.5《关联》(源文件:_epub-src/OEBPS/Text/chapter59.xhtml) - 结论依据:原文定义 join 的组合语义,并说明无限流通常需用窗口同步两条流;长窗口、大状态和宽泛条件会拖慢关联。 - 原始内容:关联(join)用于将两个数据流中满足特定条件的元素对组合起来,按指定规则形成新元素,并将新元素输出为数据流。