知识卡片
协作限并发依赖惰性生产任务
书中用生成器逐个创建inline_install,再对同一迭代器启动五个coiterate;每轮yield出的Deferred结束后,该消费者才继续取下一项,因而大致形成五个在途槽位。若先急切启动全部任务再交给Cooperator,不能得到同样限制。Cooperator是协作调度器,不是任意代码的全局限流器;9.19秒是原书等时任务记录。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 第8章 Scrapy编程 8.1.2 理解Twisted和非阻塞I/O——一个Python故事 · 查看原书依据
coop.coiterate(work)
参考来源
- 位置:《Python编程精进(第1辑)(套装共3册)(异步图书)》精通Python爬虫框架Scrapy · 第8章 Scrapy编程,spine040单元005;来源项目book-sources,extracted/Python编程精进(第1辑)(套装共3册)(异步图书)/_epub-src/OEBPS/text00039.html。
- 结论依据:原文五个coiterate共享生成器且等待所yield的Deferred,直接支持约五槽限制来自逐项创建,先启动全部工作便不满足前提。补充核验入口:https://docs.twisted.org/en/stable/api/twisted.internet.task.Cooperator.html。未在本机运行示例或改变环境。
- 原始内容:defer.DeferredList([coop.coiterate(work) for i in xrange(5)]) # join.addCallback(lambda _: reactor.stop()) print "Bye from Tw