知识卡片
大事务为何受限
分布式事务需要两阶段提交,底层还要经 Raft 复制。事务过大时,提交本身变慢,还会卡住后续的 Raft 复制,所以原文列出的默认限制是:单个事务不超过 5000 条 SQL 语句、单条 KV entry 不超过 6MB、KV entry 总大小不超过 10G。
这些限制按 KV 计算:一行数据对应一个 KV entry,每多一个索引再多一个。再算上编码和事务额外 Key 的开销,实践建议每个事务不超过 200 行、单行小于 100KB,否则性能可能不佳。因此 Insert、Update、Delete 都应分批或加 LIMIT。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 4 处
- 使用概览 · 查看原书依据
事务大小限制 由于分布式事务要做两阶段提交,并且底层还需要做 Raft 复制,如果一个事务非常大,会使得提交过程非常慢,并且会卡住下面的 Raft 复制流程。为了避免系统出现被卡住的情况,我们对事务的大小做了限制:
- 使用概览 · 查看原书依据
上面提到了 TiDB 对单个事务的大小有限制,这层限制是在 KV 层面,反映在 SQL 层面的话,简单来说一行数据会映射为一个 KV entry,每多一个索引,也会增加一个 KV entry。
- 使用概览 · 查看原书依据
对事务的大小限制,要考虑 TiDB 做编码以及事务额外 Key 的开销,在使用的时候,建议每个事务的行数不超过 200 行,且单行数据小于 100k,否则可能性能不佳。
- 使用概览 · 查看原书依据
建议无论是 Insert,Update 还是 Delete 语句,都通过分 Batch 或者是加 Limit 的方式限制。
参考来源
- 位置:《TiDB 最佳实践(v8.5)》第01章《使用概览》·《TiDB 最佳实践》(源文件:extracted/TiDB 最佳实践(v8.5)/_epub-src/OEBPS/text/ch01.xhtml;片段 n01-01;阅读段落 17,43,45,46)(来源项目:book-sources;内容对应 docs-cn release-8.5)
- 结论依据:原文给出大事务拖慢提交并卡住 Raft 复制的因果,列出默认限制,并在写入一节换算为行级建议。
- 原始内容:事务大小限制 由于分布式事务要做两阶段提交,并且底层还需要做 Raft 复制,如果一个事务非常大,会使得提交过程非常慢,并且会卡住下面的 Raft 复制流程。为了避免系统出现被卡住的情况,我们对事务的大小做了限制: …… 上面提到了 TiDB 对单个事务的大小有限制,这层限制是在 KV 层面,反映在 SQL 层面的话,简单来说一行数据会映射为一个 KV entry,每多一个索引,也会增加一个 KV entry。 …… 对事务的大小限制,要考虑 TiDB 做编码以及事务额外 Key 的开销,在使用的时候,建议每个事务的行数不超过 200 行,且单行数据小于 100k,否则可能性能不佳。 …… 建议无论是 Insert,Update 还是 Delete 语句,都通过分 Batch 或者是加 Limit 的方式限制。