知识卡片

普通读书笔记卡 · 8025.ep · 生成模型:未记录

协作限并发依赖惰性生产任务

理解等级:中级

书中用生成器逐个创建inline_install,再对同一迭代器启动五个coiterate;每轮yield出的Deferred结束后,该消费者才继续取下一项,因而大致形成五个在途槽位。若先急切启动全部任务再交给Cooperator,不能得到同样限制。Cooperator是协作调度器,不是任意代码的全局限流器;9.19秒是原书等时任务记录。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    参考来源

    - 位置:《Python编程精进(第1辑)(套装共3册)(异步图书)》精通Python爬虫框架Scrapy · 第8章 Scrapy编程,spine040单元005;来源项目book-sources,extracted/Python编程精进(第1辑)(套装共3册)(异步图书)/_epub-src/OEBPS/text00039.html。 - 结论依据:原文五个coiterate共享生成器且等待所yield的Deferred,直接支持约五槽限制来自逐项创建,先启动全部工作便不满足前提。补充核验入口:https://docs.twisted.org/en/stable/api/twisted.internet.task.Cooperator.html。未在本机运行示例或改变环境。 - 原始内容:defer.DeferredList([coop.coiterate(work) for i in xrange(5)]) # join.addCallback(lambda _: reactor.stop()) print "Bye from Tw