知识卡片
湖仓分工
数据湖和数据仓库不是二选一:书中把建设分为数据湖、数据仓库和数据集市三层。数据湖保存全域原始数据,既为数仓供数,也能直接服务探索和机器学习等应用;数据仓库面向分析需求,由原始数据经清理、填充和转换后按核心业务逻辑组织,通常要预先定义结构。湖提供广度和原貌,仓提供稳定口径和高效分析。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《云原生数据中台:架构、方法论与实践》第10章《数据湖与数据仓库》(源文件:_epub-src/OEBPS/Text/chapter128.xhtml、_epub-src/OEBPS/Text/chapter135.xhtml)
- 结论依据:原文将数据仓库建设简单分为数据湖、数据仓库和数据集市三层;数据湖除为数仓提供原始数据外也可直接为上层应用服务;数据仓库是针对OLAP需求建设、由原始数据清理填充转换后按核心业务逻辑组织生成的数据库,一般须预先定义Schema。
- 原始内容:可以看到,除了为数据仓库提供原始数据之外,数据湖也可以直接为上层的数据应用提供服务。……在本书中,我们将数据仓库的建设简单分为数据湖、数据仓库和数据集市三层