知识卡片
微博多活同步演进
微博第一版MytriggerQ以MySQL从库触发器把表变化转成消息,但一次发微博涉及多张表,每条事件信息不完整、到达有先后,导致缓存更新出现时序问题。团队随后改由业务写完整消息到MCQ,并在平台化后构建WMB跨机房同步,逐步实现异地多活。
案例表明:把表级变化用于重建业务状态,必须处理事务边界、事件顺序与上下文;主动产生业务消息能让语义更明确,却仍需保证业务写入与发消息的衔接及重试幂等。不能据一次失败断言所有CDC都无法承载同步,也不能认为改成业务发消息就自动杜绝丢失和乱序。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《高可用架构(第1卷)》第1章《高可用架构案例精选》"1.7 微博"异地多活"部署经验谈"节,"1.7.1 微博异地多活建设历程"(源文件:_epub-src/OEBPS/Text/Chapter1_7_2.xhtml)
- 结论依据:原文说明第1版MytriggerQ方案"微博的同一个业务会有好几张表,而每张表的信息又不全,这样每发一条微博会有多条消息先后到达,造成较多时序问题,缓存容易花……第1套方案未能成功,但也让我们认识了跨机房消息同步的核心问题,并促使我们全面下线MytriggerQ的消息同步方案,而改用基于业务写消息到MCQ的解决方案",直接支撑本卡片结论。
- 原始内容:第1套方案未能成功,但也让我们认识了跨机房消息同步的核心问题,并促使我们全面下线MytriggerQ的消息同步方案,而改用基于业务写消息到MCQ(MemcacheQ,新浪自研的一套消息队列,类Memcache协议,参见http://memcachedb.org/memcacheq/)的解决方案。