知识卡片
Region合并慢的处理
问题:Region Merge 速度慢。常见原因是受 merge-schedule-limit、region-schedule-limit 限制,或与其他调度器竞争。处理方式:
- 已知有大量空 Region:把 max-merge-region-size 和 max-merge-region-keys 调小,因为合并涉及副本迁移,参与合并的 Region 越小越快。生成 Merge Operator 已经很快时,还可把 patrol-region-interval 调为 10ms(v5.3.0 起为默认值)加快巡检,代价是消耗更多 CPU。
- 创建大量表后又清空(包括 TRUNCATE TABLE):开启 split table 时这些空 Region 无法合并。把 TiKV 的 split-region-on-table 设为 false(不支持动态修改);PD 侧,集群中没有 TiDB 实例时把 key-type 设为 raw 或 txn,有 TiDB 实例时 key-type 设为 table 并开启 enable-cross-table-merge。开启 placement-rules 后切换 key-type 要谨慎,避免 key 无法正常解码。
- 3.0.4 和 2.1.16 以前的版本,删表后 approximate_keys 可能统计偏大,无法满足 max-merge-region-keys,可调大该值规避。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 4 处
- 性能调优 · 查看原书依据
Region Merge 速度慢也很有可能是受到 limit 配置的限制(merge-schedule-limit 及 region-schedule-limit),或者是与其他调度器产生了竞争。具体来说,可有如下处理方式:
- 性能调优 · 查看原书依据
假如已经从相关 Metrics 得知系统中有大量的空 Region,这时可以通过把 max-merge-region-size 和 max-merge-region-keys 调整为较小值来加快 Merge 速度。
- 性能调优 · 查看原书依据
创建过大量表后(包括执行 Truncate Table 操作)又清空了。此时如果开启了 split table 特性,这些空 Region 是无法合并的,此时需要调整以下参数关闭这个特性:
- 性能调优 · 查看原书依据
对于 3.0.4 和 2.1.16 以前的版本,Region 中 Key 的个数 (approximate_keys) 在特定情况下(大部分发生在删表之后)统计不准确,造成 keys 的统计值很大,无法满足 max-merge-region
参考来源
- 位置:《TiDB 最佳实践(v8.5)》第05章《性能调优》·《PD 调度策略最佳实践》(源文件:extracted/TiDB 最佳实践(v8.5)/_epub-src/OEBPS/text/ch05.xhtml;片段 n05-04;阅读段落 318,319,320,321)(来源项目:book-sources;内容对应 docs-cn release-8.5)
- 结论依据:原文对Region合并慢的处理给出上述机制、条件或数据;本卡把已读说明整理为可独立理解的解释。
- 原始内容:Region Merge 速度慢也很有可能是受到 limit 配置的限制(merge-schedule-limit 及 region-schedule-limit),或者是与其他调度器产生了竞争。具体来说,可有如下处理方式: …… 假如已经从相关 Metrics 得知系统中有大量的空 Region,这时可以通过把 max-merge-region-size 和 max-merge-region-keys 调整为较小值来加快 Merge 速度。 …… 创建过大量表后(包括执行 Truncate Table 操作)又清空了。此时如果开启了 split table 特性,这些空 Region 是无法合并的,此时需要调整以下参数关闭这个特性: …… 对于 3.0.4 和 2.1.16 以前的版本,Region 中 Key 的个数 (approximate_keys) 在特定情况下(大部分发生在删表之后)统计不准确,造成 keys 的统计值很大,无法满足 max-merge-region