知识卡片

普通读书笔记卡 · 2275.as.6.g.9

双层架构依赖数据往返

理解等级:高级

数据湖加数仓的双层平台能分别服务机器学习与 BI,但分析数据要从湖复制到仓;机器学习若需仓内聚合结果又可能反向复制。容量、时效和一致性成本随复制链路增加,设计时应列清每份数据的责任与同步延迟。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《Practical Lakehouse Architecture》第2章《Traditional Architectures and Modern Data Platforms》(源文件:_epub-src/OEBPS/ch02.html) - 结论依据:原文明确区分双层组合架构与单存储层湖仓,并指出湖仓之间双向复制导致同步和维护负担。 - 原始内容:The combined architecture persists large volumes of data in both storage tiers. While the data lake stores all the data extracted from source systems, a substantial data set is copied to a data warehouse for BI analytics. As the data grows, the amount of data duplicated in the warehouse keeps increasing. Since there are two