知识卡片
跨机房同步分离抽取与落库阶段
Otter 把跨机房增量同步拆为 Select、Extract、Transform、Load:源机房选择并抽取变更,目标机房转换并载入。分段后可按网络边界部署工作节点,并由管理端下发任务、接收状态。这个拆分让采集、传输和目标库适配各有责任;跨机房故障恢复仍需依赖节点协同与任务状态,不能把同步视为一次文件复制。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《大数据技术体系详解:原理、架构与实践》第2章《关系型数据的收集》2.4.3(源文件:_epub-src/OEBPS/text00017.html)
- 结论依据:原文给出 Otter 的 S/E/T/L 四阶段、跨机房部署位置以及 Manager、Node 和 ZooKeeper 的协调职责。
- 原始内容:Otter将整个同步流程抽象为Select、Extract、Transform、Load(简称S、E、T、L)四个阶段……Select和Extract一般部署在原机房,而Transform和Load则部署在目标机房。……Manager负责发布同步任务配置,接收同步任务反馈的状态信息等。