知识卡片

结构图卡 · 2720.g

Canal伪装从库

理解等级:未标注

MySQL 主从复制过程:主库把变更写入 binlog,从库的 IO 线程订阅 binlog 写入 relay log,SQL 线程重放 relay log。Canal 把自己伪装成从库订阅主库 binlog,业务代码无需改动就能按顺序捕获所有变更,可用于增量刷新缓存(出错时可回退到某个 binlog 位置重放),或统一下发商品变更等任务通知。

结构图:

flowchart LR
  A["客户端写入master"] --> B["master记录binlog"]
  B --> C["slave的I/O线程订阅binlog<br/>写入本地relay log"]
  C --> D["slave的SQL线程重放relay log<br/>完成主从数据同步"]
  B -.Canal伪装成slave同样订阅binlog.-> E["Canal Server<br/>无需改动业务代码"]
  E --> F["Canal Client消费变更事件"]
  F --> G["同步缓存 / 数据异构 / 下发任务通知下游系统"]
这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《亿级流量网站架构核心技术》第15章《队列术》"15.11.1 MySQL主从复制""15.11.2 Canal简介"(源文件:_epub-src/EPUB/text00001.html,navPoint playOrder 278、279) - 结论依据:原文说明MySQL主从复制"slave数据库会订阅master数据库的binlog日志,通过一个I/O线程从binlog的指定位置拉取日志进行主从同步……slave I/O线程读取到日志后会先写入relay log重放日志中。slave数据库会通过一个SQL线程读取relay log进行日志重放",并说明"可以把Canal看作slave数据库,其订阅主数据库的binlog日志,然后读取并解析日志,这样就实现了数据同步/异构","相对于消息队列,通过这种机制可以实现数据的有序性和一致性",直接支撑本卡片结论。版本语境:本书为 2017 年前后的实现,迁移前以当前官方文档与压测复核。 - 原始内容:可以把Canal看作slave数据库,其订阅主数据库的binlog日志,然后读取并解析日志,这样就实现了数据同步/异构……Canal是阿里开源的一款基于MySQL数据库binlog的增量订阅和消费组件,通过它可以订阅数据库的binlog日志,然后进行一些数据消费……相对于消息队列,通过这种机制可以实现数据的有序性和一致性。