知识卡片

普通读书笔记卡 · 2579.b

Worker持续汇报

理解等级:未标注

Worker注册后,Master才知道它有多少资源可用于调度;但一次注册不够,Worker可能崩溃、宕机或断网。所以Worker持续向Master发送心跳,Master记录每个Worker的最后心跳时间,由定时任务检查超时的Worker并将其移除。资源管理依靠持续的状态流,而不是一次性的注册表。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《Spark内核设计的艺术:架构设计与实现 (大数据技术丛书)》第9章《部署模式》(源文件:_epub-src/EPUB/text00249.html) - 结论依据:原文说明Worker注册让Master知道其资源配置;Worker进程崩溃、宕机或网络不通会使注册信息不可用,因此Worker向Master发送心跳,Master更新最后心跳时间,超时检查任务据此判断Worker失效。 - 原始内容:为了让Master及时得知Worker的最新状态,Worker需要向Master发送心跳,Master将根据Worker的心跳更新Worker的最后心跳时间,以便为整个集群的健康工作提供参考。