知识卡片
字段声明与字段填值不同
PropertiesItem以Field声明允许的字段名,title等原始字段、images/location等计算字段可以分阶段填充。声明不要求每个爬虫都立即填值,也不自动提供数据类型或业务有效性校验;使用未声明字段会有相应错误。图像/地理编码数据还依赖后续管道实际启用和成功运行,不能仅凭字段存在就假设已计算。字段块缩进需一致,四个空格是惯例而非Python强制只能使用四个。
结构图: 类图
classDiagram
class Item
class PropertiesItem {
+title
+price
+description
+address
+image_urls
+images
+location
+url
+project
+spider
+server
+date
}
Item <|-- PropertiesItem
note for PropertiesItem "字段声明不是已填值、强类型或必填保证"
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 第3章 爬虫基础 3.3.1 声明item · 查看原书依据
我们声明一个字段并不意味着
参考来源
- 位置:《Python编程精进(第1辑)(套装共3册)(异步图书)》精通Python爬虫框架Scrapy · 第3章 爬虫基础,spine035单元014;来源项目book-sources,extracted/Python编程精进(第1辑)(套装共3册)(异步图书)/_epub-src/OEBPS/text00034.html。
- 结论依据:原文明示声明字段不意味着立即填值,支持schema、阶段填充与有效性校验分开,Field本身没有自动强制业务类型。补充核验入口:https://docs.scrapy.org/en/latest/topics/items.html。未在本机运行示例或改变环境。
- 原始内容:深入解释它们。需要重点注意的一个事情是,我们声明一个字段并不意味着我们将在每个爬虫中都填充该字段,或是全部使用它。你可以随意添加任何你感觉合适的字段,因为你可以在之后更正它们。 表3.2 可计算字段 Python表达式 images 图