知识卡片
数据总线传播变化而非重复全量
数据总线把数据源已经发生的变更通知给关注它的缓存、索引或分析系统。近实时、按主题选择和从某位置回溯,是降低重复扫描并恢复下游的重要能力。通知通道并不天然保证下游数据库与源库同一事务提交,应分别说明保留位置、重复处理和业务一致性要求。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 2 处
- 数据通道 · 查看原书依据
数据总线的作用就是能够形成数据变化通知通道,当集中存储的数据源(往往是关系型数据库)的数据发生变化时,能尽快通知对数据变化敏感的相关应用或者系统构件,使得它们能尽快捕获这种数据变化。图7-3所示即是Linkedin的Databus数据总线系统,所有数据更新首先体现到Oracle数据库中,通过Databus可以将数据变化近实时(Near-Real-Time)地通知搜索系统、关系图系统以及缓存副本等。
- 延伸阅读 · 查看原书依据
点评:数据总线的作用就是能够形成数据变化通知通道,当集中存储的数据源(往往是关系数据库)的数据发生变化时,能尽快通知对数据变化敏感的相关应用或者系统构件,使它们尽快捕获这种数据变化。Linkedin的Databus是一个典型且相对完善的数据总线系统,其提供了近实时性捕获数据变化、数据回溯能力以及主题订阅能力。
参考来源
- 位置:《大数据日知录:架构与算法》7(源文件:extracted/大数据日知录_架构与算法/_epub-src/OEBPS/text00012.html)
- 结论依据:本章实际原文及必要原图;产品与性能描述保留2014年版本范围。校正的官方入口及实际阅读范围见50-root-official.json。
- 原始内容:数据总线的作用就是能够形成数据变化通知通道,当集中存储的数据源(往往是关系型数据库)的数据发生变化时,能尽快通知对数据变化敏感的相关应用或者系统构件,使得它们能尽快捕获这种数据变化。图7-3所示即是Linkedin的Databus数据总线系统,所有数据更新首先体现到Oracle数据库中,通过Databus可以将数据变化近实时(Near-Real-Time)地通知搜索系统、关系图系统以及缓存副本等。