知识卡片

普通读书笔记卡

工人槽位完成后再派新任务

理解等级:高级

工头可为每个工人保留一个在途结果槽位:槽位为空就派任务,结果就绪后汇总并清空,下一轮再派给该工人。这把并发数限制在可用工人附近。示例只用完成数 j 判断何时结束,却独立递增派发数 data;若只要求处理 20 条,还应约束派发总数并处理剩余在途任务,避免多派或漏收。参见 [[异步任务用状态取结果]]。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《大规模分布式系统架构与设计实战》第2章《分布式并行计算的原理与实践》2.5.2“工头工人计算模式更完整的示例”(源文件:`_epub-src/OEBPS/text00020.html`) - 结论依据:原文说明 `hmarr` 按工人保存异步结果、完成后置空再派任务;示例代码中 `j<20` 控制完成数,`data++` 在槽位空时持续派发,支持对派发边界提出检查。 - 原始内容:这里通过hmarr数组来记录每次每个工人任务分配的结果,需要轮循hmarr的每个结果是否已经计算完成,如果计算完成就设置为null,进行新的任务安排。