知识卡片
MirrorMaker跨集群消费再生产
本书 Kafka 2.0.0 的 Mirror Maker 用消费者从源 Kafka 集群读消息,再由生产者写入目标 Kafka 集群,形成跨集群准实时镜像。它不同于 Connect 连接 Kafka 与其他数据系统,也不同于分区重分配在单个集群内部搬移副本。源与目标的 bootstrap.servers 必须指向不同集群:若消费和生产都指向同一集群、同一主题,新写入的消息又会被自身消费并重写,形成循环复制。图 9-2 的 Cluster 1 → Mirror Maker → Cluster 2 是方向示例,使用时须核对两端集群身份与主题范围;此卡未运行镜像命令。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《深入理解Kafka:核心设计与实践原理 2019》第9章《Kafka应用》9.3 节及图 9-2(源文件:`_epub-src/OEBPS/Text/chapter10.xhtml`;图片:`_epub-src/OEBPS/Images/336_1.jpg`)
- 结论依据:原文解释消费再生产机制及与 Connect、分区重分配的范围区别,并明确同集群同主题会循环复制;图示核对源、目标和中间环节。
- 原始内容:其实现原理是通过从源集群中消费消息,然后将消息生产到目标集群中