知识卡片
项目爬虫与任务是不同对象
按原书界面先创建项目,再在Spiders中看部署的爬虫,在Jobs中看各次运行,Periodic Jobs保存周期安排,Settings管理部署等配置。项目是容器,爬虫是可执行抓取逻辑,一次任务是该逻辑的某次运行;看到项目或爬虫存在不代表已有数据。菜单名称与注册步骤是旧平台操作示例,本次未注册账号。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 第6章 部署到Scrapinghub 6.1 注册、登录及创建项目 · 查看原书依据
Jobs 和Spiders 区域
参考来源
- 位置:《Python编程精进(第1辑)(套装共3册)(异步图书)》精通Python爬虫框架Scrapy · 第6章 部署到Scrapinghub,spine038单元002;来源项目book-sources,extracted/Python编程精进(第1辑)(套装共3册)(异步图书)/_epub-src/OEBPS/text00037.html。
- 结论依据:原文Jobs/Spiders和Periodic Jobs分别管理代码与运行,支持项目容器、抓取逻辑和一次执行分开,存在Spider不证明已有结果。未在本机运行示例或改变环境。
- 原始内容:中,可以看到几个区域,如图6.2所示。 Jobs 和 Spiders 区域分别提供关于运行和爬虫的信息。 Periodic Jobs 允许我们计划定期爬取任务。而另外4个区域目前来说对我们没有那么有用。 图6.2 主菜单 我们可以直接前往 S