知识卡片

普通读书笔记卡 · 2330.a

GFS大Chunk三收益

理解等级:未标注

历史GFS为大文件和追加等主要工作负载选择64MB Chunk。较大的分块减少每个文件需要的块元数据,也让客户端在位置缓存有效时反复访问同块、复用到Chunk服务器的连接,从而减少主节点请求和连接开销。这不是所有文件系统的通用最优值,也不保证查过一次位置后永不再联系主节点;应把它与GFS的工作负载和可靠性假设一起理解。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    • 计算机体系结构基础 · 查看原书依据

      选择较大的Chunk尺寸有如下几个优点。 (1)减少了客户端和主节点通信的需求,只需要和主节点进行一次通信就可以获取Chunk的位置信息,之后可以对同一个Chunk进行多次的读写操作。即使是小规模的随机读取,采用较大的Chunk尺寸也带来明显的好处,客户端可以轻松地缓存一个数TB工作数据集

    参考来源

    - 位置:《软硬件融合 (黄朝波 著)》第3章《计算机体系结构基础》(来源项目book-sources;源文件:extracted/软硬件融合 (黄朝波 著)/_epub-src/OEBPS/Text/chapter010.xhtml) - 结论依据:该项对“历史GFS为大文件和追加等主要工作负载选择64MB Chunk”给出定义、对比、案例或条件;保留论证范围,不将启发式当无条件定律。 - 原始内容:选择较大的Chunk尺寸有如下几个优点。 (1)减少了客户端和主节点通信的需求,只需要和主节点进行一次通信就可以获取Chunk的位置信息,之后可以对同一个Chunk进行多次的读写操作。即使是小规模的随机读取,采用较大的Chunk尺寸也带来明显的好处,客户端可以轻松地缓存一个数TB工作数据集