知识卡片
输入去重与输出须一起提交
MillWheel将输入ID、状态变化、计时变化和待发送衍生记录纳入原子持久检查点,再确认上游并可靠发送输出。重试时识别已提交记录,发送失败则从持久输出恢复。原子范围限于框架管理的数据,外部非事务副作用需要额外协议;“恰好一次”描述可观测状态效果而非网络永不重传。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 流式计算 · 查看原书依据
3)步骤2)涉及的所有状态、计时改变及衍生数据被写入外部数据库作为状态持久化。
参考来源
- 位置:《大数据日知录:架构与算法》第12章《流式计算》,原文段落93(OEBPS/text00017.html)。
- 结论依据:本卡说明书中机制及其适用条件;出版时版本、目标数字与架构状态不作为当前普遍保证。
- 原始内容:3)步骤2)涉及的所有状态、计时改变及衍生数据被写入外部数据库作为状态持久化。