← 返回刚才阅读的位置

知识卡片

普通读书笔记卡 · 2280.h.1.a.1

只写不随工具过时的准则

理解等级:初级

作者两人都是由数据科学家转为数据工程师,自嘲为“数据修补科学家”:公司在数据科学人才上投入巨大,数据科学家却常困在数据收集、清洗、访问控制、转换和基础设施这些数据工程问题上。

本书刻意不写什么:不讲特定工具、技术或平台的用法——那类书“保质期很短”。本书专注数据工程背后的基本概念,补的是“如何把各种工具组合起来、满足下游数据消费者需求”这一空白。

主线与目标:主线是数据工程生命周期——生成、存储、获取、转换、服务。技术和供应商产品兴衰无数,这几个阶段基本没变;用这个框架思考,更容易把技术用于真实业务问题。作者希望提炼出能包容任何技术、经得起时间考验的准则,期望这个思考框架在未来 10 年或更久仍然有用。

明确的立场:全书采用云优先思路,认为上云是几十年来最广泛的转型趋势,大多数本地系统最终会上云,数据工程师会倾向使用云托管服务;但多数概念也有非云版本。

读法建议:新手先读每章的顶层逻辑和章末补充资料,第二遍再留意不熟悉的术语;用云平台的免费额度练手时,要用少量数据和单节点集群并密切关注成本。全书三部分:第 1–4 章讲定义、生命周期、架构与选型;第 5–9 章逐一深入生命周期各阶段(全书核心);第 10–11 章讲安全隐私与未来,附录讲序列化压缩与云网络。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    参考来源

    - 位置:《数据工程之道:设计和构建健壮的数据系统》第00章《前言》前言(源文件:extracted/数据工程之道-设计和构建健壮的数据系统/_epub-src/EPUB/xhtml/Section0004.xhtml,来源项目 book-sources) - 结论依据:前言说明作者由数据科学转向数据工程的动机,本书不涉及特定工具而专注基本概念,以生成、存储、获取、转换、服务的生命周期为主线追求经久不衰的准则,采用云优先思路,并给出读者对象、准备工作、阅读建议与全书结构。 - 原始内容:本书不涉及关于使用特定工具、技术或平台的数据工程内容。