知识卡片
大块减少元数据但限制小文件
若每块元信息成本近似固定,较大块及大文件会减少单位数据对应的索引项,降低Master内存压力。小文件很多时,文件名与映射仍可能占大量内存;增大块也可能让少数热点更集中。书中PB到GB估算依文件及副本计数口径,不能据此证明任意规模单Master都不会瓶颈。
可联系[[总控瓶颈取决于职责]]理解设计条件。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- · 查看原书依据
每个chunk的元数据小于64字节
参考来源
- 位置:《大规模分布式存储系统:原理解析与架构实战》第4章《分布式文件系统》(来源项目book-sources;extracted/大规模分布式存储系统:原理解析与架构实战/_epub-src/OEBPS/Text/Section0001_split_001.xhtml;src-025)。
- 结论依据:4.1.3讨论块信息和压缩命名空间,4.1.5强调设计依赖大文件负载。
- 原始内容:每个chunk的元数据小于64字节