知识卡片
在线建索引分阶段发布
建索引先增加元信息,再经过 delete only、write only、reorganization 到 public。回填范围覆盖已有行,多个 Worker 分段处理,并定期保存进度;索引不能在历史数据尚未补齐时直接按完整索引供查询使用。
关联:[[DDL两层状态]]从相邻机制说明这一边界。
结构图:
stateDiagram-v2
[*] --> none
none --> delete_only
delete_only --> write_only
write_only --> reorganization
reorganization --> public : 回填完成并同步
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 8 处
- TiDB 源码阅读系列文章(十七)DDL 源码解析 · 查看原书依据
add index 主要做 2 件事:
- TiDB 源码阅读系列文章(十七)DDL 源码解析 · 查看原书依据
修改 table 的元信息,把 indexInfo 加入到 table 的元信息中去。
- TiDB 源码阅读系列文章(十七)DDL 源码解析 · 查看原书依据
把 table 中已有了的数据行,把 index columns 的值全部回填到 index record 中去。
- TiDB 源码阅读系列文章(十七)DDL 源码解析 · 查看原书依据
这里引入了 online schema change 的几个步骤,需要留意 indexInfo 的状态变化:none -> delete only -> write only -> reorganization -> public。在 reorganization -> public 时,
- TiDB 源码阅读系列文章(十七)DDL 源码解析 · 查看原书依据
启动多个 worker 用于并发回填数据到 index record。
- TiDB 源码阅读系列文章(十七)DDL 源码解析 · 查看原书依据
把 reorgInfo 中需要 reorganization 分裂成多个 range。扫描的默认范围是 [startHandle , endHandle],然后默认以 128 为间隔分裂成多个 range,之后并行扫描对应数据行。在 master 分支中,range 范围信息是从 PD 中
- TiDB 源码阅读系列文章(十七)DDL 源码解析 · 查看原书依据
把 range 包装成多个 task,发给 worker 并行回填 index record。
- TiDB 源码阅读系列文章(十七)DDL 源码解析 · 查看原书依据
等待所有 worker 完成后,更新 reorg 进度,然后持续第 3 步直到所有的 task 都做完。
参考来源
- 位置:《TiDB源码阅读系列文章》第17章《TiDB 源码阅读系列文章(十七)DDL 源码解析》(来源项目:book-sources;源文件:extracted/TiDB源码阅读系列文章/_epub-src/OEBPS/Text/TiDB 源码阅读系列文章(十七)DDL 源码解析.html;阅读段落 35,36,37,44,45,46,47,48;均为书中版本)
- 结论依据:原文对在线建索引分阶段发布给出上述机制或边界;本卡把已读说明整理为可独立理解的解释。
- 原始内容:add index 主要做 2 件事: …… 修改 table 的元信息,把 indexInfo 加入到 table 的元信息中去。 …… 把 table 中已有了的数据行,把 index columns 的值全部回填到 index record 中去。 …… 这里引入了 online schema change 的几个步骤,需要留意 indexInfo 的状态变化:none -> delete only -> write only -> reorganization -> public。在 reorganization -> public 时, …… 启动多个 worker 用于并发回填数据到 index record。 …… 把 reorgInfo 中需要 reorganization 分裂成多个 range。扫描的默认范围是 [startHandle , endHandle],然后默认以 128 为间隔分裂成多个 range,之后并行扫描对应数据行。在 master 分支中,range 范围信息是从 PD 中 …… 把 range 包装成多个 task,发给 worker 并行回填 index record。 …… 等待所有 worker 完成后,更新 reorg 进度,然后持续第 3 步直到所有的 task 都做完。