知识卡片
动态字段不能误改共享模式
示例用item.fields[name]=Field动态接纳配置字段,再交给ItemLoader填值。Item的字段映射通常归类所有,直接修改它可能影响同类的其他实例,不能据item变量名就认定是私有schema。当前Scrapy也支持普通字典等Item类型,应明确每种数据容器的字段约束;原书并未展开完整动态模式管理。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 第5章 迅速的爬虫技巧 5.4 基于Excel文件爬取的爬虫 · 查看原书依据
item.fields[name] = Field()
参考来源
- 位置:《Python编程精进(第1辑)(套装共3册)(异步图书)》精通Python爬虫框架Scrapy · 第5章 迅速的爬虫技巧,spine037单元007;来源项目book-sources,extracted/Python编程精进(第1辑)(套装共3册)(异步图书)/_epub-src/OEBPS/text00036.html。
- 结论依据:原文item.fields写入看似实例操作,但字段映射属类共享,直接支持动态schema需确定所有权,变量名不证明实例私有。补充核验入口:https://docs.scrapy.org/en/latest/topics/items.html。未在本机运行示例或改变环境。
- 原始内容:ritems(): if xpath: item.fields[name] = Field() l.add_xpath(name, xpath) return l.load_item() 接下来开始爬取,并将结果输出到 out.csv 文件中。 $ scrapy