知识卡片
真实访问日志定义热点数据
容灾缓存应优先准备真实用户正在访问的数据,而非人工维护静态清单。对访问日志中的可容灾 URL 去重、清理无业务价值参数,再均匀预取,可提升缓存完整性和命中率,也控制爬取并发对线上服务的影响。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《高性能之道:SRE视角下的运维架构实践》第12章《静态容灾降级系统》(源文件:`_epub-src/EPUB/xhtml/Section0001_0019.xhtml`)
- 结论依据:原文用日志生成热点 URL,说明真实访问数据更有代表性,并建议将请求均匀分布在采集周期中。
- 原始内容:日志系统数据作为热点数据很有说服力,可以提升缓存系统的数据完整性……控制爬虫爬取数据的速度,你可以将目前的URL平均到20分钟内爬取,均匀爬取,减轻并发压力。