← 返回刚才阅读的位置

知识卡片

普通读书笔记卡 · 2280.h.1.a.10.b

仅插入模式的利弊

理解等级:中级

CRUD:创建、读取、更新、删除,是在数据库中存储应用状态最常见的模式,也大量出现在 RESTful API 中。对 CRUD 表可以按快照取数;而用 CDC 获取事件,能拿到完整操作历史并支持近实时分析。

仅插入(insert-only)模式:不更新旧记录,而是每次插入一条带创建时间戳的新记录。例如客户改地址时,CRUD 直接 update;仅插入则插入同一客户 ID 的新地址记录,读当前地址就取该 ID 下最新的一条。它相当于把数据库日志直接维护在表里,适合需要展示历史的场景(如银行展示客户地址变更历史)。

仅插入式 ETL:源端保持 CRUD 表,每当 CRUD 表发生更新,管道就在目标分析表里插入一条新记录,从而在分析侧保留历史。

两个缺点: 1. 表膨胀:数据频繁变化时每次变更都新增一行,有时需按截止日期或最大版本数清理; 2. 查找开销:查当前状态要运行 MAX(created_timestamp),若单个 ID 下有成百上千条记录,这个查找代价很高。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    参考来源

    - 位置:《数据工程之道:设计和构建健壮的数据系统》第05章《第5章 源系统中的数据生成》5.2.8 CRUD;5.2.9 仅插入(源文件:extracted/数据工程之道-设计和构建健壮的数据系统/_epub-src/EPUB/xhtml/Section0011.xhtml,来源项目 book-sources) - 结论依据:5.2.8节介绍CRUD及快照与CDC两种取数方式;5.2.9节介绍仅插入模式的做法、适用场景、在ETL中的用法和表膨胀、查找开销两个缺点。 - 原始内容:从某种意义上说,仅插入模式直接在表本身中维护数据库日志,如果应用程序需要访问历史记录,则这种模式特别有用。