← 返回卡片

原书出处

大数据日知录_架构与算法

12 流式计算

2014年9月第1版 · 核验版本的摘录快照 · 导入于 2026-10-24T04:14:12.140Z

可以看到,重复检测在其中起了很关键的作用。下面来看看,如果没有重复检测会发生什么:假设下游节点在接收到数据后处理完成步骤3),之后发生故障,没有来得及向上游节点发送ACK消息,然后下游节点的计算逻辑在本地或者其他机器重新启动,上游节点长时间未收到确认消息,会再次发送,这样该条数据会被再次处理并重复修改状态等信息,然后将错误的状态信息持久化到外部存储中。

此预览只包含定位所需的摘录和上下文。

原书定位详情

来源:a19c7933-4eda-4176-aebd-30fe7e1ad292

正文位置:extracted/大数据日知录_架构与算法/_epub-src/OEBPS/text00017.html

EPUB SHA-256:e45b74c4bdd8959aef24f2a5183280eb73ec5f173108f8679a4bbf44bbd5b34d