← 返回刚才阅读的位置

知识卡片

普通读书笔记卡 · 5619.f.16.b.2.a

请求深度沿响应继续传播

理解等级:中级

首次请求深度0,子请求由父响应深度加1形成,响应要携带原请求深度,分析器无需额外接收原请求就可生成后续请求。最大深度限制扩展,但完成还要等下载、分析及条目处理全部结束;深度有上限本身不能证明队列已空或全局停机。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    • 一个网络爬虫框架的设计和实现 · 查看原书依据

      一个请求的深度等于对它的父请求的深度递增一次后的结果。 在理解了我们刚刚对请求深度计算方法的描述之后,读者可能会发现:只有对某个请求的响应内容进行分析之后,才可能会需要生成新的请求。

    参考来源

    - 位置:《Go并发编程实战》第09章《一个网络爬虫框架的设计和实现》之《9.4 详细设计》(来源项目book-sources;源文件:extracted/Go并发编程实战/_epub-src/text/part0000_split_066.html) - 结论依据:原文围绕请求深度沿响应继续传播给出定义、实例或限制;卡片结合这些上下文解释条件,已知错误在正文就近校正。 - 原始内容:一个请求的深度等于对它的父请求的深度递增一次后的结果。 在理解了我们刚刚对请求深度计算方法的描述之后,读者可能会发现:只有对某个请求的响应内容进行分析之后,才可能会需要生成新的请求。