知识卡片
独立双写存在中间失败窗口
业务分别写数据库与消息系统时,一步成功另一步失败,会出现已变更却无通知或有通知却无相应数据的窗口。不能只改变两步先后顺序就消除问题,也不能把Paxos共识直接当作任意两资源原子提交的完整方案。书中以此引出从已提交数据库日志捕获变化;消费者仍需处理重试与重复。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
- · 第7章 数据通道
原书出处 · 1 处
- 数据通道 · 查看原书依据
所谓“应用双写”,是指应用将数据变化同时写入数据库以及某个Pub-Sub消息系统中,关注数据变化的应用可以订阅Pub-Sub消息系统中自己关心的主题,以此来获得数据通知,即数据库的归数据库,应用的归消息系统。这种思路的好处是实现简捷,但是存在潜在的数据不一致问题,如果在写入数据库和消息系统过程中没有特定一致性协议(两阶段提交或者Paxos等)来保证,很可能数据库和消息系统中的数据会出现不一致状态。
参考来源
- 位置:《大数据日知录:架构与算法》7(源文件:extracted/大数据日知录_架构与算法/_epub-src/OEBPS/text00012.html)
- 结论依据:本章实际原文及必要原图;产品与性能描述保留2014年版本范围。校正的官方入口及实际阅读范围见50-root-official.json。
- 原始内容:所谓“应用双写”,是指应用将数据变化同时写入数据库以及某个Pub-Sub消息系统中,关注数据变化的应用可以订阅Pub-Sub消息系统中自己关心的主题,以此来获得数据通知,即数据库的归数据库,应用的归消息系统。这种思路的好处是实现简捷,但是存在潜在的数据不一致问题,如果在写入数据库和消息系统过程中没有特定一致性协议(两阶段提交或者Paxos等)来保证,很可能数据库和消息系统中的数据会出现不一致状态。