知识卡片

速度层补新鲜度

普通读书笔记卡 · 1789

内容

速度层只处理尚未进入批处理视图的最新数据,用实时视图补齐查询的新鲜度。它不是第二套权威系统,而是临时近似层;权威结果最终会被批处理层覆盖。

参考来源

- 位置:《大数据系统构建:可扩展实时数据系统构建原理与最佳实践》第12章《实时视图》"12.1 计算实时视图"一节(源文件:_epub-src/OEBPS/Text/091.xhtml) - 结论依据:原文明确"速度层中的这些视图只代表近期的数据……速度层可以通过在所有近期数据(即还未进入服务层的数据)上运行方法来生成它的视图",说明速度层只负责尚未被批处理层吸收的最新数据切片,而非承担完整的权威数据集。 - 原始内容:速度层的基本目标与批处理层和服务层是一样的,即生成可以被高效查询的视图。关键的不同之处在于,速度层中的这些视图只代表近期的数据,并且它们必须在新数据到达后很快被更新……速度层可以通过在所有近期数据(即还未进入服务层的数据)上运行方法来生成它的视图。