返回主题:状态与容错:状态存哪、错了怎么恢复

此卡片不在当前主题的阅读序列中,可返回主题继续阅读。

知识卡片

普通读书笔记卡 · 1791.a

批次标识防重复

理解等级:中级

给每个批次稳定ID,并严格按序处理;每个状态键把结果与最近批次ID一起原子保存。重放时,若该键已包含本批次便不重复累加,尚未成功的键则完成更新。

只存最近ID之所以足够,依赖旧批次不会在后续批次之后任意重放、同批输入保持协议要求,以及值和ID不可分开写。这个机制提供重试安全效果,不表示多个状态键会对查询全局原子可见。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    • · 查看原书依据

      由于元组被有序处理,并且计数和ID被自动更新,因此这能正常工作。

    参考来源

    - 位置:《大数据系统构建:可扩展实时数据系统构建原理与最佳实践》第16章《微批量流处理》(来源项目book-sources;源文件:extracted/大数据系统构建:可扩展实时数据系统构建原理与最佳实践/_epub-src/OEBPS/Text/114.xhtml) - 结论依据:正文先说明单元组强有序及值/ID同步更新,再推广批次和部分分区成功后的逐键重试;按机制解释原文自动更新应具备的原子条件。 - 原始内容:由于元组被有序处理,并且计数和ID被自动更新,因此这能正常工作。