知识卡片
等待写入后仍须返回管道数据
书中精简process_item用inlineCallbacks等待treq.post,却没有显式返回Item;该片段完成后结果为None,不是原数据。要继续Pipeline处理,应按目标Python/Twisted版本正确传回业务结果,并处理写入失败。作者说明完整代码另有细节,此处不能把省略版本直接当可组合的完整管道,本次未运行或提交文档。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 第9章 管道秘诀 9.1.2 用于写入Elasticsearch的管道 · 查看原书依据
yield treq.post(self.es_url, data)
参考来源
- 位置:《Python编程精进(第1辑)(套装共3册)(异步图书)》精通Python爬虫框架Scrapy · 第9章 管道秘诀,spine041单元004;来源项目book-sources,extracted/Python编程精进(第1辑)(套装共3册)(异步图书)/_epub-src/OEBPS/text00040.html。
- 结论依据:原文精简inlineCallbacks只yield post无返回,直接显示链结果为None而非原Item,等待外部操作不自动保存管道返回契约。补充核验入口:https://docs.scrapy.org/en/latest/topics/item-pipeline.html。未在本机运行示例或改变环境。
- 原始内容:e).encode("utf- 8") yield treq.post(self.es_url, data) 其中,前两行用于定义标准的 process_item() 方法,可以在其中 yield 延迟操作(参考第8章)。 第 3 行用于准备要插入的 data 。首先,我们将