知识卡片
没有理由就选单云
混合云:几乎没有企业能一夜之间把所有负载搬上云,混合模式假定部分负载无限期留在云外——企业在某些领域已运营卓越,只迁移在云上有直接好处的负载(如把本地 Spark 栈迁到临时云集群,减轻运维并能快速扩展大作业)。把分析放在云中是好模式:本地应用产生的事件数据几乎免费推到云上,大量数据留在云中分析,只有少量数据返回本地(模型部署、反向 ETL),出口成本最低。新一代托管混合服务(Anthos、Outposts)甚至把云托管服务器放进客户数据中心。
多云的动机:SaaS 平台希望靠近客户现有的云负载(Snowflake、Databricks 都多云提供,数据密集应用受网络延迟、带宽和出口成本制约);或在各云中挑最好的服务(GCP 处理 Google 广告数据、Azure 跑微软负载、AWS 的 Lambda 和招聘便利)。缺点:出口成本与网络瓶颈、管理大量服务的复杂性、跨云集成与安全、复杂的多云网络。“云中云”服务(如 Snowflake 在不同云账户间提供简单复制和基本相同的界面)正在降低这些复杂性。
去中心化:区块链、Web 3.0、边缘计算可能在未来颠覆现有模式,目前对数据领域影响不大,但值得关注。
作者的建议:
- 仍处于云过渡初期,云本身也在从 EC2 式 IaaS 转向 Glue、BigQuery、Snowflake 等托管服务;
- 为现在做计划:避免陷入考虑所有未来架构排列组合的无休止分析,为当前需求和近期具体计划选最佳技术,关注简单性和灵活性;
- 除非有令人信服的理由,否则不要选复杂的多云或混合云——需要多云靠近客户提供数据?行业法规要求某些数据留在自己的数据中心?两朵云上各有不可替代的服务?都不是,就选单云;
- 要有逃生计划:每种技术(包括开源)都有一定锁定,单云在简单性和集成上优势大,但锁定也大。逃生计划主要是心智上的灵活性——分析现状、想象替代方案;准备它能帮你现在做出更好决定,并在出错时给你出路。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 第4章 根据数据生命周期选择技术 · 查看原书依据
特别是,除非有令人信服的理由,否则不要选择复杂的多云或混合云策略。
参考来源
- 位置:《数据工程之道:设计和构建健壮的数据系统》第04章《第4章 根据数据生命周期选择技术》4.6.3 混合云;4.6.4 多云;4.6.5 去中心化;4.6.6 我们的建议(源文件:extracted/数据工程之道-设计和构建健壮的数据系统/_epub-src/EPUB/xhtml/Section0009.xhtml,来源项目 book-sources)
- 结论依据:4.6.3节说明混合云的理由与把分析放在云中以减少出口成本;4.6.4节说明多云的动机、缺点与云中云服务;4.6.5节提及去中心化计算;4.6.6节建议为现在做计划、无令人信服理由时选择单云并准备逃生计划。
- 原始内容:特别是,除非有令人信服的理由,否则不要选择复杂的多云或混合云策略。