知识卡片
水平分表的查询难题
水平分表后,join 要在代码或中间件中逐个子表查询再合并;order by 要各表查出后统一排序。count 有两种办法:各子表 count 相加,简单但慢,20 张表串行可能要几秒;维护记录数表,读取快,但每次增删都要同步更新,且无法与子表操作同处一个事务,容易不一致;不要求实时的业务可用定时任务刷新记录数表。分库分表的中间件还要识别 SQL 操作了哪张表、有无聚合与排序,比读写分离复杂得多。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 5 处
- 高性能数据库集群:分库分表 · 查看原书依据
count() 相加: 具体做法是在业务代码或者数据库中间件中对每个表进行 count() 操作,然后将结果相加
- 高性能数据库集群:分库分表 · 查看原书依据
记录数表: 具体做法是新建一张表
- 高性能数据库集群:分库分表 · 查看原书依据
水平分表后,数据分散到多个子表中,排序操作无法在数据库中完成
- 高性能数据库集群:分库分表 · 查看原书依据
分库分表的实现除了要判断操作类型外,还要判断 SQL 中具体需要操作的表、操作函数
- 高性能数据库集群:分库分表 · 查看原书依据
order by、group by 操作等
参考来源
- 位置:《从零开始学架构》第15讲《高性能数据库集群:分库分表》"水平分表"之"join操作""count()操作""order by操作""实现方法"(源文件:_epub-src/OEBPS/text00001.html)
- 结论依据:原文说明"水平分表后,数据分散在多个表中,如果需要与其他表进行 join 查询,需要在业务代码或者数据库中间件中进行多次 join 查询",并展开count()相加与记录数表两种方案的优劣、order by需要"由业务代码或者数据库中间件分别查询每个子表中的数据,然后汇总进行排序",以及"分库分表的实现除了要判断操作类型外,还要判断 SQL 中具体需要操作的表、操作函数……然后再根据不同的操作进行不同的处理",直接支撑本卡片结论。
- 原始内容:count() 相加:具体做法是在业务代码或者数据库中间件中对每个表进行 count() 操作,然后将结果相加……记录数表:具体做法是新建一张表……水平分表后,数据分散到多个子表中,排序操作无法在数据库中完成……分库分表的实现除了要判断操作类型外,还要判断 SQL 中具体需要操作的表、操作函数……order by、group by 操作等