知识卡片
拓扑层次影响数据访问成本
附录把单机、机架和集群连接关系作为数据访问路径的基础:本地访问、同机架访问与跨机架访问会经过不同设备和链路。它提示架构设计关注数据位置及链路瓶颈,而不是所有网络必然具有相同层级和超售比。图A-1的40~80台机架规模属于历史示意,不作为容量规范。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 分布式系统常用硬件性能指标 · 查看原书依据
一般的网络拓扑结构由单机、机架、集群三级结构构成,如图A-1所示,机架包含40~80台服务器,它通过机架交换机连接,由数量不等的机架通过集群交换机连接形成规模不同的集群。一般机架交换机的带宽要大于集群交换机,这也是我们看到很多大数据系统为何在考虑数据局部性的时候,优先选择将计算推送到数据存储服务器,然后选择将计算和存储服务器配置到同一机架内,最后才选择跨机架配置计算和存储的原因。
参考来源
- 位置:《大数据日知录:架构与算法》附A(源文件:extracted/大数据日知录_架构与算法/_epub-src/OEBPS/text00023.html)
- 结论依据:本章实际原文及必要原图;产品与性能描述保留2014年版本范围。校正的官方入口及实际阅读范围见50-root-official.json。
- 图像证据:对应原图已实际查看,路径与SHA见50-root-images.json;图内字段或数值与正文摘录分别取证。
- 原始内容:一般的网络拓扑结构由单机、机架、集群三级结构构成,如图A-1所示,机架包含40~80台服务器,它通过机架交换机连接,由数量不等的机架通过集群交换机连接形成规模不同的集群。一般机架交换机的带宽要大于集群交换机,这也是我们看到很多大数据系统为何在考虑数据局部性的时候,优先选择将计算推送到数据存储服务器,然后选择将计算和存储服务器配置到同一机架内,最后才选择跨机架配置计算和存储的原因。
- 本卡原图证据:/Users/wangyi/claudecodeProject/bookBase/book-sources/extracted/大数据日知录_架构与算法/_epub-src/OEBPS/Image00389.jpg;SHA-256 182996ee7013e6e53c3d8df13141607e633ae1a573ac326504ee5d03c4b4b69a;已逐张实际查看,示意字段/数值来自该图。