知识卡片
GFS大Chunk三收益
历史GFS为大文件和追加等主要工作负载选择64MB Chunk。较大的分块减少每个文件需要的块元数据,也让客户端在位置缓存有效时反复访问同块、复用到Chunk服务器的连接,从而减少主节点请求和连接开销。这不是所有文件系统的通用最优值,也不保证查过一次位置后永不再联系主节点;应把它与GFS的工作负载和可靠性假设一起理解。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 计算机体系结构基础 · 查看原书依据
选择较大的Chunk尺寸有如下几个优点。 (1)减少了客户端和主节点通信的需求,只需要和主节点进行一次通信就可以获取Chunk的位置信息,之后可以对同一个Chunk进行多次的读写操作。即使是小规模的随机读取,采用较大的Chunk尺寸也带来明显的好处,客户端可以轻松地缓存一个数TB工作数据集
参考来源
- 位置:《软硬件融合 (黄朝波 著)》第3章《计算机体系结构基础》(来源项目book-sources;源文件:extracted/软硬件融合 (黄朝波 著)/_epub-src/OEBPS/Text/chapter010.xhtml)
- 结论依据:该项对“历史GFS为大文件和追加等主要工作负载选择64MB Chunk”给出定义、对比、案例或条件;保留论证范围,不将启发式当无条件定律。
- 原始内容:选择较大的Chunk尺寸有如下几个优点。 (1)减少了客户端和主节点通信的需求,只需要和主节点进行一次通信就可以获取Chunk的位置信息,之后可以对同一个Chunk进行多次的读写操作。即使是小规模的随机读取,采用较大的Chunk尺寸也带来明显的好处,客户端可以轻松地缓存一个数TB工作数据集