知识卡片
返回结构化数据才能进入后续处理
在parse中构造PropertiesItem并给字段赋值,再返回它,框架才能识别抓取结果并送入管道或导出;单纯log字段只是输出日志。extract/re例子得到列表,因此此时title、price等仍是列表内容,并没有因放入Item就变成标量或数字。后续清洗和输出策略应显式决定。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 第3章 爬虫基础 3.3.3 填充item · 查看原书依据
return item
参考来源
- 位置:《Python编程精进(第1辑)(套装共3册)(异步图书)》精通Python爬虫框架Scrapy · 第3章 爬虫基础,spine035单元016;来源项目book-sources,extracted/Python编程精进(第1辑)(套装共3册)(异步图书)/_epub-src/OEBPS/text00034.html。
- 结论依据:原文return item将结果交框架,与只log对照直接支持输出入口;extract仍给列表,放入Item不自动变标量或数值。补充核验入口:https://docs.scrapy.org/en/latest/topics/spiders.html。未在本机运行示例或改变环境。
- 原始内容:)').extract() 最后,使用 return item 返回item。最新版的 properties/spiders/basic.py 代码如下所示。 import scrapy from properties.items