知识卡片

普通读书笔记卡 · 1769.w

独立双写存在中间失败窗口

理解等级:中级

业务分别写数据库与消息系统时,一步成功另一步失败,会出现已变更却无通知或有通知却无相应数据的窗口。不能只改变两步先后顺序就消除问题,也不能把Paxos共识直接当作任意两资源原子提交的完整方案。书中以此引出从已提交数据库日志捕获变化;消费者仍需处理重试与重复。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    • 数据通道 · 查看原书依据

      所谓“应用双写”,是指应用将数据变化同时写入数据库以及某个Pub-Sub消息系统中,关注数据变化的应用可以订阅Pub-Sub消息系统中自己关心的主题,以此来获得数据通知,即数据库的归数据库,应用的归消息系统。这种思路的好处是实现简捷,但是存在潜在的数据不一致问题,如果在写入数据库和消息系统过程中没有特定一致性协议(两阶段提交或者Paxos等)来保证,很可能数据库和消息系统中的数据会出现不一致状态。

    参考来源

    - 位置:《大数据日知录:架构与算法》7(源文件:extracted/大数据日知录_架构与算法/_epub-src/OEBPS/text00012.html) - 结论依据:本章实际原文及必要原图;产品与性能描述保留2014年版本范围。校正的官方入口及实际阅读范围见50-root-official.json。 - 原始内容:所谓“应用双写”,是指应用将数据变化同时写入数据库以及某个Pub-Sub消息系统中,关注数据变化的应用可以订阅Pub-Sub消息系统中自己关心的主题,以此来获得数据通知,即数据库的归数据库,应用的归消息系统。这种思路的好处是实现简捷,但是存在潜在的数据不一致问题,如果在写入数据库和消息系统过程中没有特定一致性协议(两阶段提交或者Paxos等)来保证,很可能数据库和消息系统中的数据会出现不一致状态。