知识卡片
批次ID与状态原子持久化
Trident以稳定事务ID识别批次,并把已提交ID与聚合状态原子保存,配合有序提交避免同一批重放再次生效。Transactional Spout还需保证同ID重放同内容,Opaque State有额外前后状态要求。Trident是处理及状态抽象,不是所有应用直接把数据存入的单一数据库。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 流式计算 · 查看原书依据
最新的事务ID和此时对应的节点状态信息一起存入Trident,在真正存入之前做下面两个步骤的检查。
参考来源
- 位置:《大数据日知录:架构与算法》第12章《流式计算》,原文段落117(OEBPS/text00017.html)。
- 结论依据:本卡说明书中机制及其适用条件;出版时版本、目标数字与架构状态不作为当前普遍保证。原文错误或过度断言据官方资料限定:[https://github.com/apache/storm/blob/master/docs/Trident-state.md](https://github.com/apache/storm/blob/master/docs/Trident-state.md)。
- 原始内容:最新的事务ID和此时对应的节点状态信息一起存入Trident,在真正存入之前做下面两个步骤的检查。