知识卡片
HTTP缓存包含策略与存储两层
HTTPCACHE_ENABLED激活请求/响应缓存,DIR或STORAGE决定保存位置与介质,POLICY决定哪些响应可缓存及如何复用。它不是对任意请求无条件永久保存的承诺,HTTP语义、身份及策略会影响有效性。原书scrapy.contrib路径和RFC2616类名是历史入口,DBM指相应键值存储接口,并非任选一种SQL数据库即可替换。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 第7章 配置与管理 7.2.4 HTTP缓存和离线运行 · 查看原书依据
HTTPCACHE_POLICY
参考来源
- 位置:《Python编程精进(第1辑)(套装共3册)(异步图书)》精通Python爬虫框架Scrapy · 第7章 配置与管理,spine039单元007;来源项目book-sources,extracted/Python编程精进(第1辑)(套装共3册)(异步图书)/_epub-src/OEBPS/text00038.html。
- 结论依据:原文POLICY与STORAGE分开设置,直接支持是否复用与保存介质不同,启用开关没有承诺任意请求永久有效。补充核验入口:https://docs.scrapy.org/en/latest/topics/downloader-middleware.html。未在本机运行示例或改变环境。
- 原始内容:存会存储每个请求及其对应的响应。通过将 HTTPCACHE_POLICY 设置为 scrapy.contrib.httpcache.RFC2616Policy ,可以启用一个遵从 RFC2616 的更复杂的缓存策略。为了启用该缓存,还需要将