知识卡片
失败缓存要有恢复和失效策略
把首次异常保存为后续errback动作,可避免相同失败反复调用外部服务,但书中缓存无期限和逐类失效策略,短暂网络故障也可能长期命中失败。缓存值和异常都会占用引用;何时重试、清除或保留需按错误含义决定。缓存命中数量不证明结果仍有效或源数据未改变,本例35个地址/984命中只是其数据集统计。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
参考来源
- 位置:《Python编程精进(第1辑)(套装共3册)(异步图书)》精通Python爬虫框架Scrapy · 第9章 管道秘诀,spine041单元006;来源项目book-sources,extracted/Python编程精进(第1辑)(套装共3册)(异步图书)/_epub-src/OEBPS/text00040.html。
- 结论依据:原文将异常也存为后续errback且无期限,直接显示临时故障可长期命中,命中数不能证明有效性或恢复策略完整。未在本机运行示例或改变环境。
- 原始内容:函数式编程语言最显著和强大的特性之一。 缓存异常有些不太常见,不过这意味着如果在第一次查找某个键时, key_not_found_callback(key) 抛出了异常,那么接下来对相同键再次查询时仍然会抛出同样的异常,不需要再执