知识卡片

结构图卡 · 8025.gg · 生成模型:未记录

线程桥接要把结果送回反应器

理解等级:中级

callInThread在线程池执行阻塞函数,主流程yield out等待;工作线程通过callFromThread(out.callback,value)安排由反应器线程恢复Deferred链,避免后续Scrapy逻辑意外跑在工作线程。线程池仍有容量和共享状态约束,纯PythonCPU工作也未必因线程获得多核加速。本书sleep模拟100毫秒等待,不是真实计算性能测试。

结构图: 类图

classDiagram
 class UsingBlocking {
  +process_item(item, spider)
  -_do_calculation(price, out)
  -beta
  -delta
  -lock
 }
 UsingBlocking ..> Deferred : process_item等待结果
 UsingBlocking ..> Reactor : callInThread及callFromThread
 UsingBlocking --> RLock : 保护共享状态
这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    参考来源

    - 位置:《Python编程精进(第1辑)(套装共3册)(异步图书)》精通Python爬虫框架Scrapy · 第9章 管道秘诀,spine041单元013;来源项目book-sources,extracted/Python编程精进(第1辑)(套装共3册)(异步图书)/_epub-src/OEBPS/text00040.html。 - 结论依据:原文callInThread执行、callFromThread安排out.callback,直接支持执行位置与链恢复线程分开,线程池仍受共享状态和容量约束。未在本机运行示例或改变环境。 - 原始内容: 1 time.sleep(0.10) reactor.callFromThread(out.callback, new_price) 在前面的管道中,我们看到了实际运行的基本原语。对于每个 Item ,我们抽取其价格,并希望使用 _do_calculation() 方法处理它。该方法使用了一个阻塞操作