知识卡片

普通读书笔记卡 · 8025.ee · 生成模型:未记录

重定向优先级的符号不能反读

理解等级:中级

REDIRECT_PRIORITY_ADJUST为正会提高相对原请求的优先级,原书设2却说等所有非重定向请求完成后才调度是反的;也不能由此保证在所有其他请求前完成。REDIRECT_MAX_TIMES限制跟进次数,超限不是承诺把最后页面正常交给回调。重试、HTTP错误允许状态和URL长度各自控制不同环节,不应混作通用恢复开关。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    参考来源

    - 位置:《Python编程精进(第1辑)(套装共3册)(异步图书)》精通Python爬虫框架Scrapy · 第7章 配置与管理,spine039单元016;来源项目book-sources,extracted/Python编程精进(第1辑)(套装共3册)(异步图书)/_epub-src/OEBPS/text00038.html。 - 结论依据:原文正2却描述最后执行,与Request数值越大优先相反,直接支持更正选择顺序,优先也不保证远端完成先后。补充核验入口:https://docs.scrapy.org/en/latest/topics/settings.html。未在本机运行示例或改变环境。 - 原始内容:重试、重定向以及元刷新中间件。例如,将 REDIRECT_PRIORITY_ADJUST 设为2,意味着每次发生重定向时,新请求将会在所有非重定向请求完成服务后才会被调度;而将 REDIRECT_MAX_TIMES 设置为20,则表示在执行20次重定向后,下载器将会