知识卡片
好架构追求最不差
运行架构与技术架构:运行架构描述需要做什么——与人、流程和技术相关的功能需求,如数据服务哪些业务流程、如何管理数据质量、从生成到可查询的延迟要求;技术架构描述如何实现——数据在生命周期中如何获取、存储、转换和服务,例如如何每小时把 10TB 从源库搬到数据湖。
什么是“好”的数据架构:
- Richards 和 Ford:永远不要追求最好的架构,而要追求最不差的架构;
- Grady Booch:架构代表塑造系统的重要设计决策,重要性由变更的成本衡量;
- 好的数据架构用一组通用的、可广泛重用的构建块满足业务需求,同时保持灵活并做出合适的权衡;糟糕的架构是专制的,把一堆一刀切的决定塞进“大泥球”;
- 敏捷性是基础:去年服务得很好的架构可能满足不了今年;糟糕的架构紧耦合、僵化、过度集中,或用错工具,阻碍开发和变更;设计时考虑可逆性能降低变更成本;
- 底层设计(安全、数据管理、DataOps、数据架构、编排、软件工程)是任何成熟度阶段好架构的基础;
- 好的数据架构是有生命力的,永远不会完结——变更与演进是其意义和目的的核心。
谁来设计:象牙塔数据架构的时代已经过去,工程与架构的分离会越来越少。理想情况下数据工程师与专职数据架构师合作;小公司或低成熟度公司里数据工程师可能兼任架构师,所以要理解“好的”架构与各类架构的权衡(云数仓与数据湖、各云平台、何时用 Beam、Flink 统一批流)。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 第3章 设计好的数据架构 · 查看原书依据
好的数据架构是有生命力的。它永远不会结束。
参考来源
- 位置:《数据工程之道:设计和构建健壮的数据系统》第03章《第3章 设计好的数据架构》3.1.2 数据架构定义;3.1.3 “好的”数据架构;3.5 谁参与了数据架构的设计(源文件:extracted/数据工程之道-设计和构建健壮的数据系统/_epub-src/EPUB/xhtml/Section0008.xhtml,来源项目 book-sources)
- 结论依据:3.1.2节区分运行架构与技术架构;3.1.3节引用Richards与Ford、Booch说明好架构的含义,对比好架构与糟糕架构的特征,指出敏捷性、底层设计与持续演进的重要;3.5节说明数据架构由谁设计、数据工程师可能兼任架构师。
- 原始内容:好的数据架构是有生命力的。它永远不会结束。