知识卡片

普通读书笔记卡 · 8025.fb · 生成模型:未记录

利特尔法则需要一致的对象与窗口

理解等级:中级

稳定条件下平均在途数量可用吞吐率乘同一群体的平均逗留时间估算。原书日志25项/秒和0.78秒对应约19.5项,但公式换成43×0.45,虽接近19却与日志不一致。只按成功Item统计也不能直接覆盖失败请求或不同管道队列;推断不应超过30缺少普遍依据,不能当任意CONCURRENT_REQUESTS的上限。

第9章把25项/秒与0.77秒、3.33秒相乘,分别得到约19和83项在途,说明在下游等待增加而吞吐维持时,需要容纳更多未完成工作;更多在途也增加内存、队列和连接等资源压力,不能由示例推导永远没有性能问题。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 2 处

    参考来源

    - 位置:《Python编程精进(第1辑)(套装共3册)(异步图书)》精通Python爬虫框架Scrapy · 第8章 Scrapy编程,spine040单元009;来源项目book-sources,extracted/Python编程精进(第1辑)(套装共3册)(异步图书)/_epub-src/OEBPS/text00039.html。补充位置:第二册第9章小结,spine041单元015;来源项目book-sources,extracted/Python编程精进(第1辑)(套装共3册)(异步图书)/_epub-src/OEBPS/text00040.html。 - 结论依据:原文N=S乘T提供稳定流估算,但25乘0.78日志与43乘0.45代入不一致;后章25乘3.33约83.25也须同对象同窗口,不能推固定全局并发上限。未在本机运行示例或改变环境。 - 原始内容:尔法则,我们得到系统中item的数量为 N = S · T = 43 · 0.45 ≌ 19 。无论设置的 CONCURRENT_REQUESTS 和 CONCURRENT_REQUESTS_PER_DOMAIN 是多少,即便没;补充原始内容:线程的数例有限)。在我们的例子中,我们从N = S · T = 25 · 0.77 ≌ 19开始,在添加管道后,最终达到N = 25·3.33 ≌ 83,并且没有任何性能问题。这就是Twisted编程的力量!现在我们可以进入第10章,使Scrapy的性能更加完美。