返回主题:数据集成与分拆:一份真源与多份衍生

知识卡片

普通读书笔记卡 · 1769.u.2

数据总线传播变化而非重复全量

理解等级:中级

数据总线把数据源已经发生的变更通知给关注它的缓存、索引或分析系统。近实时、按主题选择和从某位置回溯,是降低重复扫描并恢复下游的重要能力。通知通道并不天然保证下游数据库与源库同一事务提交,应分别说明保留位置、重复处理和业务一致性要求。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 2 处

    • 数据通道 · 查看原书依据

      数据总线的作用就是能够形成数据变化通知通道,当集中存储的数据源(往往是关系型数据库)的数据发生变化时,能尽快通知对数据变化敏感的相关应用或者系统构件,使得它们能尽快捕获这种数据变化。图7-3所示即是Linkedin的Databus数据总线系统,所有数据更新首先体现到Oracle数据库中,通过Databus可以将数据变化近实时(Near-Real-Time)地通知搜索系统、关系图系统以及缓存副本等。

    • 延伸阅读 · 查看原书依据

      点评:数据总线的作用就是能够形成数据变化通知通道,当集中存储的数据源(往往是关系数据库)的数据发生变化时,能尽快通知对数据变化敏感的相关应用或者系统构件,使它们尽快捕获这种数据变化。Linkedin的Databus是一个典型且相对完善的数据总线系统,其提供了近实时性捕获数据变化、数据回溯能力以及主题订阅能力。

    参考来源

    - 位置:《大数据日知录:架构与算法》7(源文件:extracted/大数据日知录_架构与算法/_epub-src/OEBPS/text00012.html) - 结论依据:本章实际原文及必要原图;产品与性能描述保留2014年版本范围。校正的官方入口及实际阅读范围见50-root-official.json。 - 原始内容:数据总线的作用就是能够形成数据变化通知通道,当集中存储的数据源(往往是关系型数据库)的数据发生变化时,能尽快通知对数据变化敏感的相关应用或者系统构件,使得它们能尽快捕获这种数据变化。图7-3所示即是Linkedin的Databus数据总线系统,所有数据更新首先体现到Oracle数据库中,通过Databus可以将数据变化近实时(Near-Real-Time)地通知搜索系统、关系图系统以及缓存副本等。