知识卡片
爬虫参数把运行输入移出源码
-a file=…将字符串参数交给爬虫属性,再用getattr(self,“file”,“todo.csv”)提供未传时默认文件名。它让同一逻辑可处理不同配置文件,区别于-s设置框架配置。传参不自动验证文件存在、编码、可读性与列要求,也不会把任意字符串变成正确类型;本次未启动爬虫或创建CSV。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 第5章 迅速的爬虫技巧 5.4 基于Excel文件爬取的爬虫 · 查看原书依据
-a file=another_todo.csv
参考来源
- 位置:《Python编程精进(第1辑)(套装共3册)(异步图书)》精通Python爬虫框架Scrapy · 第5章 迅速的爬虫技巧,spine037单元007;来源项目book-sources,extracted/Python编程精进(第1辑)(套装共3册)(异步图书)/_epub-src/OEBPS/text00036.html。
- 结论依据:原文-a file与getattr默认值使同逻辑选不同文件,支持运行输入配置化,区别框架-s设置且不自动校验类型、编码和列。补充核验入口:https://docs.scrapy.org/en/latest/topics/spiders.html。未在本机运行示例或改变环境。
- 原始内容:crapy crawl fromcsv -a file=another_todo.csv -o out.csv