返回主题:Lambda架构与数据系统分层

此卡片不在当前主题的阅读序列中,可返回主题继续阅读。

知识卡片

普通读书笔记卡 · 2275.as.6.j.3

共享治理减少重复分析劳动

理解等级:中级

多个数据应用若都直接从原始数据开始,会重复做清洗和关联,源结构变化也会使多处程序一起修改。统一治理层把共同整理工作集中起来,让应用复用质量较好的数据,降低重复劳动和变更传播。共享需要稳定语义,不能只是把文件堆到同一处。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    • 大数据时代变革 10.2.1 数据应用的发展历程 · 查看原书依据

      然而,在开展各种各样的数据应用的时候,我们发现,如果所有的应用都是在原始数据的基础上开始分析,那么它们都需要做许多相同或者相似的工作,重复劳动量大。此外,如果每个团队都去做一遍这些工作,一旦原始数据发生变更,则各个团队都需要变更,系统维护成本巨大。因此,他们急切需要一个统一的数据平台,统一地对原始数据进行收集、整理。只有在这样一个能够治理、规整数据,提高数据质量的数据平台上,进行各种数据应用,才能降本增效,提升数据应用的质量。这个平台就是“数据中台”。

    参考来源

    - 位置:《架构真意企业级应用架构设计方法论与实践》第10章《大数据时代变革》“10.2.1 数据应用的发展历程”(来源项目a19c7933-4eda-4176-aebd-30fe7e1ad292;源文件:extracted/架构真意企业级应用架构设计方法论与实践/_epub-src/EPUB/xhtml/chapter134.xhtml)。 - 结论依据:原文的具体说明支撑这一概括:多个数据应用若都直接从原始数据开始,会重复做清洗和关联,源结构变化也会使多处程序一起修改。其余范围限定用于避免超出书内证据。 - 原始内容:然而,在开展各种各样的数据应用的时候,我们发现,如果所有的应用都是在原始数据的基础上开始分析,那么它们都需要做许多相同或者相似的工作,重复劳动量大。此外,如果每个团队都去做一遍这些工作,一旦原始数据发生变更,则各个团队都需要变更,系统维护成本巨大。因此,他们急切需要一个统一的数据平台,统一地对原始数据进行收集、整理。只有在这样一个能够治理、规整数据,提高数据质量的数据平台上,进行各种数据应用,才能降本增效,提升数据应用的质量。这个平台就是“数据中台”。