知识卡片
项目把临时探索变成可维护代码
scrapy shell适合检查响应和表达式,正式逻辑应落在项目文件中。startproject生成配置和包目录,items定义数据,pipelines组织后续处理,settings保存设置,spiders放抓取代码,scrapy.cfg标识项目配置入口。退出交互环境不保证探索逻辑已保存,应主动把有效表达式和变换写入可重用代码。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 第3章 爬虫基础 3.3 一个Scrapy项目 · 查看原书依据
scrapy startproject properties
参考来源
- 位置:《Python编程精进(第1辑)(套装共3册)(异步图书)》精通Python爬虫框架Scrapy · 第3章 爬虫基础,spine035单元013;来源项目book-sources,extracted/Python编程精进(第1辑)(套装共3册)(异步图书)/_epub-src/OEBPS/text00034.html。
- 结论依据:原文startproject生成items/pipelines/settings/spiders等职责目录,支持探索逻辑落盘组织,交互会话存在不等于代码已保存。补充核验入口:https://docs.scrapy.org/en/latest/intro/tutorial.html。未在本机运行示例或改变环境。
- 原始内容:",因为我们正在抓取的数据是房产。 $ scrapy startproject properties $ cd properties $ tree . ├── properties │ ├── __init__.py │ ├── items.py │ ├── pipel