知识卡片
全量回填走读库
约 7,000 万条历史数据用自编 Job 批量查询两个机房的读库,再写入 TiDB,耗时 10 天。
选读库是为了降低全量准备带来的 CDC/binlog 流量成本。常态交易更新不走这条批量链路,仍用 Binlog 增量。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 交易查询迁移到 TiDB:宽表建模、SQL 优化与灰度切换 · 查看原书依据
约 7,000 万条数据耗时 10 天。
参考来源
- 位置:《交易查询迁移到 TiDB:宽表建模、SQL 优化与灰度切换》第01章《交易查询迁移到 TiDB:宽表建模、SQL 优化与灰度切换》(源文件:extracted/交易查询迁移到 TiDB:宽表建模、SQL 优化与灰度切换/_epub-src/OEBPS/text/ch01.xhtml;片段 n01-02;来源项目:book-sources)
- 结论依据:原文对全量回填走读库给出了上述机制、条件或数据。
- 原始内容:约 7,000 万条数据耗时 10 天。