知识卡片

结构图卡 · 3102.a

Storm协调与执行进程分工

理解等级:中级

书中版本的 Storm 由 Nimbus 协调代码分发和任务分配,Supervisor 管理所在节点的 Worker 进程,Worker 内的 Executor 线程执行 Task。ZooKeeper 在 Nimbus 与 Supervisor 之间共享作业状态并协调调度。区分“节点、进程、线程、任务”四层,才能定位调度、进程生命周期与具体计算分别由谁负责。

结构图:

flowchart LR
  N[Nimbus进程] --> Z[ZooKeeper作业状态]
  Z --> S[Supervisor进程]
  S --> W[Worker进程]
  W --> E[Executor线程]
  E --> T[Task计算任务]
这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《实时流计算系统设计与实现》第6章6.1.1《系统架构》(源文件:_epub-src/OEBPS/Text/chapter93.xhtml;图6-1:_epub-src/OEBPS/Images/t6-1-i.jpg) - 结论依据:原文和图6-1依次说明 Nimbus、ZooKeeper、Supervisor、Worker、Executor、Task 的协调及执行关系。 - 原始内容:Master节点运行Nimbus进程,用于代码分发、任务分配和状态监控。Worker节点运行Supervisor进程和Worker进程,其中Supervisor进程负责管理Worker进程的整个生命周期,而Worker进程创建Executor线程,用于执行具体任务(Task)。