知识卡片
热图缓存与长尾回源分工
Haystack请求先由CDN或缓存满足热门图片,未命中再按逻辑卷定位到存储层。缓存减轻热点负载,存储系统仍必须高效处理长尾随机读;只扩大CDN不能消除海量冷图片元数据导致的磁盘访问成本。缓存策略与持久副本保护解决的是不同问题。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 分布式文件系统 · 查看原书依据
<CDN>指出了应该去哪个CDN读取图片,CDN在接收到这个请求后,在内部根据“逻辑卷”ID和图片ID查找图片,如果找到则将图片返回给用户,如果没有找到,则把这个URL的<CDN>部分去掉,将改写后的URL提交给HayStack缓存系统。缓存系统与CDN功能类似,首先在内部查找图片信息,如果没有找到就会到HayStack存储系统内读取,并将读出的图片放入缓存中,之后将图片数据返回给用户。这里需要注意的是:“目录服务”可以在构造URL的时候,绕过CDN,直接从缓存系统查找,这样做的目的是减轻CDN的压力。其内部查找过程是一样的。
参考来源
- 位置:《大数据日知录:架构与算法》第8章《分布式文件系统》,原文段落123(OEBPS/text00013.html)。
- 结论依据:本卡说明书中机制及其适用条件;出版时版本、目标数字与架构状态不作为当前普遍保证。
- 原始内容:<CDN>指出了应该去哪个CDN读取图片,CDN在接收到这个请求后,在内部根据“逻辑卷”ID和图片ID查找图片,如果找到则将图片返回给用户,如果没有找到,则把这个URL的<CDN>部分去掉,将改写后的URL提交给HayStack缓存系统。缓存系统与CDN功能类似,首先在内部查找图片信息,如果没有找到就会到HayStack存储系统内读取,并将读出的图片放入缓存中,之后将图片数据返回给用户。这里需要注意的是:“目录服务”可以在构造URL的时候,绕过CDN,直接从缓存系统查找,这样做的目的是减轻CDN的压力。其内部查找过程是一样的。