知识卡片

普通读书笔记卡 · 1773.m

热图缓存与长尾回源分工

理解等级:中级

Haystack请求先由CDN或缓存满足热门图片,未命中再按逻辑卷定位到存储层。缓存减轻热点负载,存储系统仍必须高效处理长尾随机读;只扩大CDN不能消除海量冷图片元数据导致的磁盘访问成本。缓存策略与持久副本保护解决的是不同问题。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    • 分布式文件系统 · 查看原书依据

      <CDN>指出了应该去哪个CDN读取图片,CDN在接收到这个请求后,在内部根据“逻辑卷”ID和图片ID查找图片,如果找到则将图片返回给用户,如果没有找到,则把这个URL的<CDN>部分去掉,将改写后的URL提交给HayStack缓存系统。缓存系统与CDN功能类似,首先在内部查找图片信息,如果没有找到就会到HayStack存储系统内读取,并将读出的图片放入缓存中,之后将图片数据返回给用户。这里需要注意的是:“目录服务”可以在构造URL的时候,绕过CDN,直接从缓存系统查找,这样做的目的是减轻CDN的压力。其内部查找过程是一样的。

    参考来源

    - 位置:《大数据日知录:架构与算法》第8章《分布式文件系统》,原文段落123(OEBPS/text00013.html)。 - 结论依据:本卡说明书中机制及其适用条件;出版时版本、目标数字与架构状态不作为当前普遍保证。 - 原始内容:<CDN>指出了应该去哪个CDN读取图片,CDN在接收到这个请求后,在内部根据“逻辑卷”ID和图片ID查找图片,如果找到则将图片返回给用户,如果没有找到,则把这个URL的<CDN>部分去掉,将改写后的URL提交给HayStack缓存系统。缓存系统与CDN功能类似,首先在内部查找图片信息,如果没有找到就会到HayStack存储系统内读取,并将读出的图片放入缓存中,之后将图片数据返回给用户。这里需要注意的是:“目录服务”可以在构造URL的时候,绕过CDN,直接从缓存系统查找,这样做的目的是减轻CDN的压力。其内部查找过程是一样的。