知识卡片
分库分表后带来的四个棘手问题
从单库单表架构演变为”垂直分库、水平分表”或”水平分库、水平分表”架构时,有四个棘手问题需要提前慎重规划,理解这四者能看出分库分表并非只有收益、也有实实在在的代价。ACID特性如何保证:单库内的事务能天然由数据库引擎保证,但跨库跨表的操作一旦涉及分布式环境,本地事务无法覆盖,需要额外的分布式事务或最终一致性方案。多表之间的关联查询如何进行:跨库表之间无法再用SQL的join直接关联查询。无法继续使用外键约束:外键约束本身依赖同一个数据库实例内的完整性检查机制,跨库后失效。无法继续使用数据库自身提供的全局唯一且连续的ID生成机制(如Oracle的Sequence、MySQL的AUTO_INCREMENT):因为这些机制都是面向单点设计的,分布式环境下每个分库都各自独立维护自增序列,会产生ID冲突。针对多表关联查询这个问题,大型互联网企业普遍遵循一条”军规”:更倾向于简单化、轻量化,尽量避免多表联合查询语句,而是拆分为多条单表查询语句多次查询——测试结果显示多次单表查询的执行效率并不比多表联合查询慢多少,为了扩展性、易读性和维护性,牺牲一点性能(如多次会话连接、资源消耗)是值得的;单表查询语句还带来两个额外优势:查询语句简单、易于理解维护和扩展,以及缓存利用率更高(因为单表查询的结果更容易被缓存命中和复用,而多表联合查询的结果集组合方式太多,难以有效缓存)。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《超大流量分布式系统架构解决方案:人人都是架构师2.0》第5章《星罗棋布——分库分表方案》"5.2.5 分库分表后所带来的影响"节(源文件:OEBPS/Text/0010.xhtml)
- 结论依据:原文说明"有 4 个比较棘手的问题是需要慎重考虑和尽早规划的,如下所示:ACID特性如何保证;多表之间的关联查询如何进行;无法继续使用外键约束;无法继续使用……全局唯一和连续性ID",并说明"更倾向于简单化、轻量化……尽可能地避免使用多表联合查询语句,而是将其拆分为多条单表查询语句,多次查询",直接支撑本卡片结论。
- 原始内容:有 4 个比较棘手的问题是需要慎重考虑和尽早规划的,如下所示:ACID特性如何保证;多表之间的关联查询如何进行;无法继续使用外键约束;无法继续使用由Oracle提供的Sequence,或者MySQL提供的AUTO_INCREMENT生成全局唯一和连续性ID……在互联网场景下,利用单表查询语句换来的优势,主要有以下两点:查询语句简单,易于理解、维护和扩展;缓存利用率高。