知识卡片

普通读书笔记卡 · 7173.f · 生成模型:Tencent Hunyuan Hy

分库分表路由及代价

理解等级:高级

扩展最后一步是拆数据:先按业务把单库拆成多库,再用复制做读写分离,可写压力仍集中在单个Master,于是分表减少单表行数、分库提升写能力,叠加即分库分表。路由通常用user_id取模,先对库数乘每库表数取模得中间变量,再整除取库、取余取表,user_id因此成为查询必须携带的条件。收益是查询性能与并发能力同时提升,代价却集中:跨表事务升为分布式事务,记录散落后难以多表关联,不带路由字段就定位不到数据,路由规则一变(扩容)就得重新迁移历史数据。这也解释了后文为何借HBase分区、用搜索引擎建大表,来补回被拆分丢掉的复杂查询能力。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    • 第2章 分布式系统基础设施 2.2 持久化存储 · 查看原书依据

      数据库经过业务拆分及分库分表之后,虽然查询性能和并发处理能力提高了,但也会带来一系列的问题。比如,原本跨表的事务上升为分布式事务;由于记录被切分到不同的库与不同的表当中,难以进行多表关联查询,并且不能不指定路由字段对数据进行查询。分库分表以后,如果需要对系统进行进一步扩容(路由策略变更),将变得非常不方便,需要重新进行数据迁移。

    参考来源

    - 位置:《大型分布式网站架构设计与实践》第2章《2.2 持久化存储》(源文件:`extracted/大型分布式网站架构设计与实践/_epub-src/text/part0007_split_002.html`,来源项目 `a19c7933-4eda-4176-aebd-30fe7e1ad292`,文件 SHA-256 `295f6fd456551991b42f11c6ede5ea1275796c8fcde953968c0945ad8b505b91`) - 结论依据:原文『原本跨表的事务上升为分布式事务…难以进行多表关联查询,并且不能不指定路由字段』直接列出拆分后的四类代价。 - 原始内容:数据库经过业务拆分及分库分表之后,虽然查询性能和并发处理能力提高了,但也会带来一系列的问题。比如,原本跨表的事务上升为分布式事务;由于记录被切分到不同的库与不同的表当中,难以进行多表关联查询,并且不能不指定路由字段对数据进行查询。分库分表以后,如果需要对系统进行进一步扩容(路由策略变更),将变得非常不方便,需要重新进行数据迁移。