知识卡片
可控基准用于隔离性能因素
伪站点可调整响应时间、详情条目数、索引结构和额外大小,DummyPipeline分别模拟阻塞、异步等待及两类API路径,便于逐项比较。仅访问本地时去掉某些限制,是为了隔离变量,不是对真实站点的配置建议。5000项46秒、125到147毫秒包含框架与启动等成本,是书中特定样本,不代表本机测试或硬件通用数值。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 第10章 理解Scrapy性能 10.3 基准系统 · 查看原书依据
SPEED_PIPELINE_BLOCKING_DELAY
参考来源
- 位置:《Python编程精进(第1辑)(套装共3册)(异步图书)》精通Python爬虫框架Scrapy · 第10章 理解Scrapy性能,spine042单元007;来源项目book-sources,extracted/Python编程精进(第1辑)(套装共3册)(异步图书)/_epub-src/OEBPS/text00041.html。
- 结论依据:原文伪站点和DummyPipeline可改变延迟与大小,支持对照隔离因素;本地去限制只服务实验,旧秒数未作本机或真实站配置保证。未在本机运行示例或改变环境。
- 原始内容:的4种延迟类型:阻塞/计算/同步延迟( SPEED_PIPELINE_BLOCKING_DELAY ,这是一种不好的方式)、异步延迟( SPEED_PIPELINE_ASYNC_DELAY ,这是一种可以接受的方式)、使用 treq 库的远程API调用( SPEED_