知识卡片

普通读书笔记卡 · 8025.fk · 生成模型:未记录

等待写入后仍须返回管道数据

理解等级:中级

书中精简process_item用inlineCallbacks等待treq.post,却没有显式返回Item;该片段完成后结果为None,不是原数据。要继续Pipeline处理,应按目标Python/Twisted版本正确传回业务结果,并处理写入失败。作者说明完整代码另有细节,此处不能把省略版本直接当可组合的完整管道,本次未运行或提交文档。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    参考来源

    - 位置:《Python编程精进(第1辑)(套装共3册)(异步图书)》精通Python爬虫框架Scrapy · 第9章 管道秘诀,spine041单元004;来源项目book-sources,extracted/Python编程精进(第1辑)(套装共3册)(异步图书)/_epub-src/OEBPS/text00040.html。 - 结论依据:原文精简inlineCallbacks只yield post无返回,直接显示链结果为None而非原Item,等待外部操作不自动保存管道返回契约。补充核验入口:https://docs.scrapy.org/en/latest/topics/item-pipeline.html。未在本机运行示例或改变环境。 - 原始内容:e).encode("utf- 8") yield treq.post(self.es_url, data) 其中,前两行用于定义标准的 process_item() 方法,可以在其中 yield 延迟操作(参考第8章)。 第 3 行用于准备要插入的 data 。首先,我们将