知识卡片
Scrapy组织采集与提取
Scrapy是组织数据抓取与结构化提取的Python框架,可把请求、页面解析、清洗和输出等工作放进可扩展流程。它提供可复用结构,避免每个项目重新拼装相同机制;仍需开发者编写适合目标数据源的逻辑。框架不自动保证外部服务可靠、所有解析正确或任意负载下低成本,原书Scrapy1.0示例需按版本理解。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 2 处
- 内容提要 · 查看原书依据
用于抓Web站点并从页面中提取结构化的数据
- 前言 · 查看原书依据
能够让你为不同源定制不同的行为
参考来源
- 位置:《Python编程精进(第1辑)(套装共3册)(异步图书)》第二册《精通Python爬虫框架Scrapy》内容提要,spine029;来源项目book-sources,extracted/Python编程精进(第1辑)(套装共3册)(异步图书)/_epub-src/OEBPS/text00028.html。
- 结论依据:前言解释语言之外的工作范围;提要与Scrapy前言解释数据提取和框架组织用途,不将作者营销评价当作实测。
- 原始内容:开发的一个快速、高层次的屏幕抓取和Web抓取框架,用于抓Web站点并从页面中提取结构化的数据。本书以Scrapy 1.0版本为基础,讲解了Scrapy的基础知识,以及如何使用Python和三方API提取、整理数据,以满足自己的需求。 本书共11章,其内