知识卡片
新从库靠快照加日志位置
增加副本或替换故障节点时,要让新从库拥有主库数据的精确副本。直接复制数据文件不够:客户端在不断写入,不同时间点拷贝出来的文件互不一致,结果可能毫无意义;锁住数据库禁止写入又违背高可用的目标。
不停机的做法:
- 在某一时刻获取主库的一致性快照,不锁整个库(备份也需要这个能力,有时要借助第三方工具,如 MySQL 的 innobackupex);
- 把快照复制到新从库;
- 新从库连接主库,拉取快照之后的全部数据变更——这要求快照与主库复制日志中的位置精确关联,PostgreSQL 称之为日志序列号(LSN),MySQL 称之为 binlog 坐标;
- 处理完积压的变更后,从库就“赶上”了主库,此后继续接收变更流。
不同数据库中,这个过程有的完全自动化,有的是需要管理员手工执行的多步骤工作流。
同样的机制用于从库故障恢复:每个从库在本地磁盘记录收到的变更,崩溃重启或网络中断后,从日志中知道故障前处理的最后一个事务,向主库请求此后的全部变更,应用完即赶上主库。相比之下,主库故障需要故障切换,复杂得多,见[[故障切换三重风险]]。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
- · 第五章:复制
原书出处 · 1 处
- 第五章:复制 · 查看原书依据
从库连接到主库,并拉取快照之后发生的所有数据变更。这要求快照与主库复制日志中的位置精确关联。
参考来源
- 位置:《数据密集型应用系统设计》第05章《第五章:复制》领导者与追随者·设置新从库;处理节点宕机(源文件:extracted/数据密集型应用系统设计/_epub-src/ch5_split_002.html,来源项目 book-sources)
- 结论依据:第五章“设置新从库”说明直接复制文件和锁库的问题,给出一致性快照、复制快照、按LSN或binlog坐标拉取后续变更、赶上主库四步;“从库失效:追赶恢复”说明从库借本地日志重连追赶。
- 原始内容:从库连接到主库,并拉取快照之后发生的所有数据变更。这要求快照与主库复制日志中的位置精确关联。