知识卡片
平滑迁移的通用四段式套路
服务层屏蔽表结构、分片和存储介质变化,在线迁移可拆成四个关口:先保留旧库写入的变更信息或建立双写,再分批回填存量,随后持续追平并校验,最后切流。旧库在切流前仍是业务真源,回填完成不等于新库一致;要有可定位的变更起点、异常重试和切流时的追平判据。若变化持续快于重放,原文提出短暂限制旧库写入后再切换,但这仍需评估业务影响。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《架构师之路》第28章《100亿数据平滑数据迁移,不影响服务》(源文件:_epub-src/OEBPS/Text/28.html)
- 结论依据:原文把日志追平和双写都排在存量搬迁之前,并要求校验后才切流;追日志不能收敛时提出短暂将旧库设为 readonly。外部文档也将全量加载、持续变更捕获与数据校验区分为不同环节。
- 原始内容:如果步骤四数据一直是99.9%的一致,不能完全一致,也是正常的,可以做一个秒级的旧库readonly,等日志重放程序完全追上数据后,再进行切库切流量。
- 外部核验:[AWS DMS 持续变更捕获](https://docs.aws.amazon.com/dms/latest/userguide/CHAP_Task.CDC.html);[AWS DMS 数据校验](https://docs.aws.amazon.com/dms/latest/userguide/CHAP_Validating.html)