← 返回刚才阅读的位置

知识卡片

普通读书笔记卡 · 2280.h.1.a.9.e

你不是Dropbox

理解等级:中级

Sarah Wang 和 Martin Casado 的文章《云的成本:万亿美元悖论》引起轰动,常被解读为呼吁把云负载搬回本地;其论点其实更微妙:公司花大量资源控制云支出,应考虑回迁作为一种选项。文章以 Dropbox 把大量负载从 AWS 迁回自有服务器为例。

作者认为这个案例常被错误引用。Dropbox 的特殊之处:

  1. 存储了数 EB 且持续增长的数据;
  2. 网络流量巨大,2017 年为此增加数百个千兆级运营商连接和互联伙伴,公有云的数据出口费用会极高;
  3. 核心竞争力是高度专业化的存储产品——结合对象存储与块存储特点、差异化的文件同步系统,在用户间高效同步编辑并尽量减少网络和 CPU 消耗,不适合标准云产品,受益于定制、高度集成的软硬件栈;
  4. 迁回核心产品后,仍在 AWS 上运行数据分析等其他负载,专注于自己的核心能力。

Backblaze(EB 级存储)、Cloudflare(服务超过 2500 万互联网资产、200 多个城市、51TB/s 网络容量)情况类似;Netflix 在 AWS 上跑视频转码(2017 年约占其计算需求 70%)、应用后端和数据分析,但与 ISP 合作自建 CDN,用专门的软硬件低成本向庞大客户群交付视频。

共同规律:自建硬件和网络的成功案例都涉及超大规模和有限用例,通过高度集成的软硬件栈获得竞争优势,并且都消耗巨量带宽——如果完全在公有云运行,数据出口费会是主要成本。

什么是“云规模”:存储数据达到 EB 级,或每秒进出互联网的流量达到 Tb 级(内部网络达到每秒 1Tb 相当容易);或者数据出口成本是业务的主要因素。达到这种规模才考虑继续在本地运行或回迁——例如苹果把 iCloud 存储迁到自己的服务器可能获得巨大财务和性能优势。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    参考来源

    - 位置:《数据工程之道:设计和构建健壮的数据系统》第04章《第4章 根据数据生命周期选择技术》4.6.7 逆云而回的争论(源文件:extracted/数据工程之道-设计和构建健壮的数据系统/_epub-src/EPUB/xhtml/Section0009.xhtml,来源项目 book-sources) - 结论依据:4.6.7节剖析《云的成本:万亿美元悖论》及Dropbox回迁案例,列出Dropbox数据量、网络流量、专业化存储产品和继续使用AWS其他服务四个特殊之处,补充Backblaze、Cloudflare、Netflix的例子,总结超大规模、有限用例与高出口成本的共同规律并给出云规模的判断标准。 - 原始内容:这些案例研究表明,在特殊情况下,公司管理自己的硬件和网络连接是有意义的。