知识卡片

问题卡 · 2699.b.4.a.2.a

热点分布不均的三种情况

理解等级:高级

问题:热点没有被及时分散。按现象分三种情况:

  • PD 指标显示有不少 hot Region,但调度跟不上:调大 hot-region-schedule-limit,并减少其他调度器的 limit 配额;还可调小 hot-region-cache-hits-threshold,让 PD 更快响应流量变化。
  • 单个 Region 自身成为热点,例如大量请求频繁扫描一张小表:打散手段无法消除,确认热点 Region 后手动添加 split-region 调度把它拆开。
  • PD 统计不到热点,但部分 TiKV 的负载明显高于其他节点:PD 只按流量分析热点,大量点查请求流量不显著,过高的 QPS 却让关键模块达到瓶颈。先从业务层面确定热点表,再添加 scatter-range-scheduler,让该表的所有 Region 均匀分布;TiDB HTTP API 也提供了简化操作的接口。
这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 3 处

    • 性能调优 · 查看原书依据

      从 PD 的 Metrics 能看出来有不少 hot Region,但是调度速度跟不上,不能及时地把热点 Region 分散开来。 解决方法:

    • 性能调优 · 查看原书依据

      单一 Region 形成热点,比如大量请求频繁 scan 一个小表,这个可以从业务角度或者 Metrics 统计的热点信息看出来。

    • 性能调优 · 查看原书依据

      从 PD 的统计来看没有热点,但是从 TiKV 的相关 Metrics 可以看出部分节点负载明显高于其他节点,成为整个系统的瓶颈。这是因为目前 PD 统计热点 Region 的维度比较单一,仅针对流量进行分析,在某些场景下无法准确定位热点。

    参考来源

    - 位置:《TiDB 最佳实践(v8.5)》第05章《性能调优》·《PD 调度策略最佳实践》(源文件:extracted/TiDB 最佳实践(v8.5)/_epub-src/OEBPS/text/ch05.xhtml;片段 n05-04;阅读段落 314,315,316)(来源项目:book-sources;内容对应 docs-cn release-8.5) - 结论依据:原文对热点分布不均的三种情况给出上述机制、条件或数据;本卡把已读说明整理为可独立理解的解释。 - 原始内容:从 PD 的 Metrics 能看出来有不少 hot Region,但是调度速度跟不上,不能及时地把热点 Region 分散开来。 解决方法: …… 单一 Region 形成热点,比如大量请求频繁 scan 一个小表,这个可以从业务角度或者 Metrics 统计的热点信息看出来。 …… 从 PD 的统计来看没有热点,但是从 TiKV 的相关 Metrics 可以看出部分节点负载明显高于其他节点,成为整个系统的瓶颈。这是因为目前 PD 统计热点 Region 的维度比较单一,仅针对流量进行分析,在某些场景下无法准确定位热点。