知识卡片
复制日志四种实现
主库把变更传给从库具体传什么内容,有四种实现方式,权衡点主要是”复制协议和存储 引擎耦合得多紧”。基于语句的复制:主库把执行的每条SQL语句(INSERT/UPDATE/DELETE) 转发给从库重新执行;最紧凑,但会被非确定性函数(NOW()、RAND())、自增列、有副作用 的触发器等破坏,边缘情况太多,现在较少作为默认方式。传输预写式日志(WAL):直接 把[[LSM树与预写日志]][[B树与页面结构]]里提到的、存储引擎本身用于崩溃恢复的仅追加字节序列发给从库, 从库重放后建立一模一样的数据结构;PostgreSQL、Oracle用这种方式,缺点是WAL记录的是 “哪个磁盘块哪些字节变了”这类极底层信息,把复制协议和存储引擎的内部格式死死绑在 一起——如果存储格式跨版本变了,主从库往往不能跑不同版本的数据库软件,也就没法 通过”先升级从库、故障切换、再升级原主库”实现零停机升级。逻辑日志复制(基于行): 用一种独立于存储引擎内部表示的日志格式,以行的粒度描述写入(插入记录所有列新值、 删除记录能定位该行的信息、更新记录定位信息+变更列新值);因为和存储引擎解耦, 更容易保持向后兼容、允许主从运行不同版本甚至不同存储引擎,对外部系统也更容易 解析——这正是”数据变更捕获”技术的基础。基于触发器的复制:把复制逻辑完全移到 应用层,用数据库自带的触发器把变更记录到一张表、再由外部程序读取处理,最灵活 (能只复制部分数据、能跨异构数据库、能自定义冲突解决逻辑),但开销最高、也最容易 出错。
结构图:
flowchart TD
A[基于语句复制] -->|最紧凑, 但非确定性函数会出错| A1[已较少作为默认方式]
B[传输WAL] -->|与存储引擎内部格式紧耦合| B1[主从版本必须匹配, 难零停机升级]
C[逻辑日志/基于行复制] -->|与存储引擎解耦| C1[可跨版本/跨存储引擎, 支撑数据变更捕获]
D[基于触发器复制] -->|复制逻辑移到应用层| D1[最灵活但开销大易出错]
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
- · 第五章:复制
原书出处 · 1 处
- 第五章:复制 · 查看原书依据
任何调用 非确定性函数(nondeterministic) 的语句,可能会在每个副本上生成不同的值。