知识卡片
混合部署的线程池调小
三节点混合部署测试的最终配置及判断依据:
- readpool.unified.max-thread-count = 6:默认取机器线程数的 80%;混合部署需手动设为期望 TiKV 使用的 CPU 线程数的 80%。
- server.grpc-concurrency = 2:CPU 有限、请求也不多,可以调低;观察 gRPC poll CPU 面板,利用率保持在 80% 以下。
- storage.scheduler-worker-pool-size = 2:默认在 16 核及以上为 8、以下为 4。它把复杂的事务请求转成简单的 KV 读写,本身不写盘,利用率保持在 50%–75% 为宜。
- performance.max-procs = 8:TiDB 侧限制 Go 进程可用的 CPU 核数。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 6 处
- 集群部署 · 查看原书依据
tikv: readpool.unified.max-thread-count: 6 server.grpc-concurrency: 2 storage.scheduler-worker-pool-size: 2 gc.max-write
- 集群部署 · 查看原书依据
该参数默认取值为机器线程数的 80%,因为是混合部署场景,你需要手动计算并指定该值。可以先设置成期望 TiKV 使用的 CPU 线程数的 80%。
- 集群部署 · 查看原书依据
因为现有部署方案的 CPU 资源有限,实际请求数也不会很多,可以把 server.grpc-concurrency 参数值调低,后续观察监控面板保持其使用率在 80% 以下即可。
- 集群部署 · 查看原书依据
本次测试最后选择设置该参数值为 2,通过 gRPC poll CPU 面板观察,利用率正好在 80% 左右。
- 集群部署 · 查看原书依据
在 TiKV 检测到机器 CPU 数大于或等于 16 时,该参数值默认为 8。CPU 数小于 16 时,该参数值默认为 4。它主要用于将复杂的事务请求转化为简单的 key-value 读写。
- 集群部署 · 查看原书依据
一般来说该线程池的利用率保持在 50% - 75% 之间是比较好的。和 gRPC 线程池情况类似,混合部署时该参数默认取值偏大,资源利用不充分。
参考来源
- 位置:《TiDB 最佳实践(v8.5)》第03章《集群部署》·《三节点混合部署的最佳实践》(源文件:extracted/TiDB 最佳实践(v8.5)/_epub-src/OEBPS/text/ch03.xhtml;片段 n03-02;阅读段落 102,108,110,111,113,114)(来源项目:book-sources;内容对应 docs-cn release-8.5)
- 结论依据:原文对混合部署的线程池调小给出上述机制、条件或数据;本卡把已读说明整理为可独立理解的解释。
- 原始内容:tikv: readpool.unified.max-thread-count: 6 server.grpc-concurrency: 2 storage.scheduler-worker-pool-size: 2 gc.max-write …… 该参数默认取值为机器线程数的 80%,因为是混合部署场景,你需要手动计算并指定该值。可以先设置成期望 TiKV 使用的 CPU 线程数的 80%。 …… 因为现有部署方案的 CPU 资源有限,实际请求数也不会很多,可以把 server.grpc-concurrency 参数值调低,后续观察监控面板保持其使用率在 80% 以下即可。 …… 本次测试最后选择设置该参数值为 2,通过 gRPC poll CPU 面板观察,利用率正好在 80% 左右。 …… 在 TiKV 检测到机器 CPU 数大于或等于 16 时,该参数值默认为 8。CPU 数小于 16 时,该参数值默认为 4。它主要用于将复杂的事务请求转化为简单的 key-value 读写。 …… 一般来说该线程池的利用率保持在 50% - 75% 之间是比较好的。和 gRPC 线程池情况类似,混合部署时该参数默认取值偏大,资源利用不充分。