知识卡片

普通读书笔记卡 · 1773.b.2

目录管理卷与写入负载

理解等级:中级

Haystack目录保存逻辑卷到物理卷映射,区分允许写入与只读卷,并为上传请求选择目标。这样图片数据传输与卷管理职责分开,也让容量及写入负载能在卷级别调整。目录可用性、映射更新与副本写入结果仍须协调,不能把它当作每张图片内容的中央中转站。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    • 分布式文件系统 · 查看原书依据

      HayStack的“目录服务”是采用数据库实现的,它提供多种功能。首先,“目录服务”保存了从“逻辑卷”到“物理卷”的映射关系表,这样在用户上传图片和读取图片时可以找到正确的文件。其次,“目录服务”提供了HayStack存储系统的负载均衡功能,保证图片写入和读取在不同机器之 间负载是相当的,不至于出现机器之间忙闲不均的状况。再次,“目录服务”还决定是将用户请求直接提交给缓存系统还是提交给CDN,以此来对这两者接收到的请求量进行均衡。此外,通过“目录服务”还可以知道哪些“逻辑卷”是只读的,哪些“逻辑卷”可以写入。在有些情况下,某些“逻辑卷”会被标记为只读的,比如其“物理卷”已经基本被写满或者存储系统需要进行调试的时候。

    参考来源

    - 位置:《大数据日知录:架构与算法》第8章《分布式文件系统》,原文段落128(OEBPS/text00013.html)。 - 结论依据:本卡说明书中机制及其适用条件;出版时版本、目标数字与架构状态不作为当前普遍保证。 - 原始内容:HayStack的“目录服务”是采用数据库实现的,它提供多种功能。首先,“目录服务”保存了从“逻辑卷”到“物理卷”的映射关系表,这样在用户上传图片和读取图片时可以找到正确的文件。其次,“目录服务”提供了HayStack存储系统的负载均衡功能,保证图片写入和读取在不同机器之 间负载是相当的,不至于出现机器之间忙闲不均的状况。再次,“目录服务”还决定是将用户请求直接提交给缓存系统还是提交给CDN,以此来对这两者接收到的请求量进行均衡。此外,通过“目录服务”还可以知道哪些“逻辑卷”是只读的,哪些“逻辑卷”可以写入。在有些情况下,某些“逻辑卷”会被标记为只读的,比如其“物理卷”已经基本被写满或者存储系统需要进行调试的时候。