知识卡片
Worker持续汇报
Worker注册后,Master才知道它有多少资源可用于调度;但一次注册不够,Worker可能崩溃、宕机或断网。所以Worker持续向Master发送心跳,Master记录每个Worker的最后心跳时间,由定时任务检查超时的Worker并将其移除。资源管理依靠持续的状态流,而不是一次性的注册表。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《Spark内核设计的艺术:架构设计与实现 (大数据技术丛书)》第9章《部署模式》(源文件:_epub-src/EPUB/text00249.html)
- 结论依据:原文说明Worker注册让Master知道其资源配置;Worker进程崩溃、宕机或网络不通会使注册信息不可用,因此Worker向Master发送心跳,Master更新最后心跳时间,超时检查任务据此判断Worker失效。
- 原始内容:为了让Master及时得知Worker的最新状态,Worker需要向Master发送心跳,Master将根据Worker的心跳更新Worker的最后心跳时间,以便为整个集群的健康工作提供参考。