知识卡片

普通读书笔记卡 · 1773.k

故障切换与状态同步分开

理解等级:中级

HDFS热备的元数据追赶解决接管所需状态,ZKFC与ZooKeeper等机制负责健康检测和自动切换,两者不能互相替代。独立进程可以减少NameNode暂停对心跳的直接影响,但不能消除网络分区、进程停顿和错误怀疑;切换还必须约束旧主的行为。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    • 分布式文件系统 · 查看原书依据

      以上措施只能保证SNN的元数据和ANN保持一致,但是还不能够实现故障自动切换,为了达到这一点,HA解决方案采用了独立于NN之外的故障切换控制器(Failover Controller,FC)。FC用于监控NN服务器的硬件、操作系统及NN本身等各种健康状况信息,并不断地向ZooKeeper写入心跳信息,ZooKeeper在此用作“领导者选举”,当ANN发生故障时,ZooKeeper重新选举SNN作为“主控服务器”,FC通知SNN从备份机转换为主控机。在Hadoop系统刚启动时,两台服务器都是SNN,通过ZooKeeper选举使得某台服务器成为ANN。

    参考来源

    - 位置:《大数据日知录:架构与算法》第8章《分布式文件系统》,原文段落82(OEBPS/text00013.html)。 - 结论依据:本卡说明书中机制及其适用条件;出版时版本、目标数字与架构状态不作为当前普遍保证。 - 原始内容:以上措施只能保证SNN的元数据和ANN保持一致,但是还不能够实现故障自动切换,为了达到这一点,HA解决方案采用了独立于NN之外的故障切换控制器(Failover Controller,FC)。FC用于监控NN服务器的硬件、操作系统及NN本身等各种健康状况信息,并不断地向ZooKeeper写入心跳信息,ZooKeeper在此用作“领导者选举”,当ANN发生故障时,ZooKeeper重新选举SNN作为“主控服务器”,FC通知SNN从备份机转换为主控机。在Hadoop系统刚启动时,两台服务器都是SNN,通过ZooKeeper选举使得某台服务器成为ANN。