此卡片不在当前主题的阅读序列中,可返回主题继续阅读。
知识卡片
数据湖也要治理
很多人认为数据湖存的是原始数据、不需要治理,这是误区:数据湖存的是未经转换的数据,但只要用于分析就需要治理。例如写入前检查结构,防止业务系统的结构变化未经协调就进入数据湖、让现有应用失效;采集到的个人可识别信息必须做合规处理。治理应从设计之初纳入,至少满足最低标准,否则数据湖会变成难以信任的沼泽。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《云原生数据中台:架构、方法论与实践》第10章《数据湖与数据仓库》(源文件:_epub-src/OEBPS/Text/chapter132.xhtml)
- 结论依据:原文指出认为数据湖存原始数据不需要治理是误区,数据湖存储未经转换的数据,任何需要支持分析的数据都需要治理;可要求写入数据湖的ODS数据经过Schema检查,敏感个人信息须合规处理,应从一开始将数据治理纳入数据湖设计,至少采用最低治理标准。
- 原始内容:很多人认为数据湖中存储的是原始数据,不需要治理,这其实是个误区。确切地说,数据湖存储的是未经转换的数据,任何需要支持分析的数据都是需要治理的。……因此,从最开始就应将数据治理纳入数据湖的设计中,至少应采用最低的治理标准。