返回主题:数据质量与校验

知识卡片

普通读书笔记卡 · 2275.as.6.b.2

数据验证兼顾技术与业务

理解等级:中级

原始数据进入平台后,至少从类型与格式、业务值的准确和完整性、约定模式三个角度验证。技术检查可跨领域复用,业务检查依赖具体语义;只让数据通过 schema,并不能保证报表结论可信。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《Practical Lakehouse Architecture》第1章《Introduction to Lakehouse Architecture》(源文件:_epub-src/OEBPS/ch01.html) - 结论依据:原文逐一列出 technical、business、schema validations 的检查对象,并说明这些检查用于防止数据在进入更高存储层时损害准确性。 - 原始内容:Technical validations Mainly related to the data types, data formats, and other checks that are technical in nature and can be applied across any domain or industry Business validations Domain- or function-specific and related to particular values in attributes, and their accuracy or completeness Schema validations What the input data feeds should follow, as per the agreed schema defined in the specifications or data contracts