返回主题:状态与容错:状态存哪、错了怎么恢复

知识卡片

普通读书笔记卡 · 3092.c

高势分组是状态爆炸的根源

理解等级:未标注

“势”是集合中不同元素的数量。即使[[流式聚合的寄存器化]]让每个分组只保留少量数值,高势键或复合键仍会产生大量分组状态。估算容量时要同时看单组状态大小、键的实际取值数与窗口寿命;本书建议无法全放本地内存时使用外部存储,并给状态设置 TTL,避免过期分组无限累积。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《实时流计算系统设计与实现》第4章4.3《时间维度聚合特征计算》(源文件:_epub-src/OEBPS/Text/chapter62.xhtml) - 结论依据:原文定义势为集合元素数量,并指出高势与复合分组会使寄存器总量变大,需要外部存储和 TTL。 - 原始内容:由于采用寄存器来记录聚合计算的中间值,也就涉及“状态”的存储问题。或许乍看之下我们会觉得,寄存器无非存储一个数字而已,又能够占用多少空间?