← 返回刚才阅读的位置

知识卡片

问题卡 · 5619.f.16.d

池容量不限制等待者的数量

理解等级:中级

startDownloading和activateAnalyzers先接收再为每项启动goroutine,随后才Take池内实体;池只限制正在持有实体的数量,等待Take的goroutine仍可无限增加。条目和错误发送也有类似扩张。需在启动工作前获取可取消额度,或采用固定工作者和有界队列。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    • 一个网络爬虫框架的设计和实现 · 查看原书依据

      通过对网页下载器池和分析器池的容量的指定却可以从侧面对相应的Goroutine的数量有所约束。另一方面,虽然爬取流程中的这些环节的代码都由不同的Goroutine(组)负责执行,但是通过我们为调度器装配的通道管理器仍然使它们成为了一个有机的整体。

    参考来源

    - 位置:《Go并发编程实战》第09章《一个网络爬虫框架的设计和实现》之《9.7 调度器的实现》(来源项目book-sources;源文件:extracted/Go并发编程实战/_epub-src/text/part0000_split_069.html) - 结论依据:原文围绕池容量不限制等待者的数量给出定义、实例或限制;卡片结合这些上下文解释条件,已知错误在正文就近校正。 - 原始内容:通过对网页下载器池和分析器池的容量的指定却可以从侧面对相应的Goroutine的数量有所约束。另一方面,虽然爬取流程中的这些环节的代码都由不同的Goroutine(组)负责执行,但是通过我们为调度器装配的通道管理器仍然使它们成为了一个有机的整体。