知识卡片

结构图卡 · 2699.c.1

HBase借ZooKeeper实现Master无状态解耦

理解等级:未标注

HBase同样是master/slave架构(HMaster管理协调,RegionServer管理和存储实际的Region),但和[[HDFS主从架构与NameNode高可用切换机制]]中NameNode必须自己扛住”元信息内存状态”的设计不同,HBase选择把Master和RegionServer之间的耦合关系整体转移给ZooKeeper:所有Region的寻址入口、HBase的schema和table元数据、哪个RegionServer上线/下线,这些原本”应该由Master直接掌管”的状态信息全部存放在ZooKeeper里,Master和RegionServer都只是ZooKeeper状态的读写方,而不是彼此直接依赖。这个设计带来一个关键收益:HMaster因此变成完全无状态的——它不再是”唯一持有关键状态、一旦挂掉全盘瘫痪”的单点,客户端的正常读写操作压根不需要经过HMaster,而是直接和RegionServer通信;即使主HMaster故障,ZooKeeper能动态选举出新的HMaster接管,这个切换对正在进行的读写请求几乎无感知,因为读写本来就不依赖HMaster。可迁移启发:当一个系统里的”协调者/管理者”角色因为持有关键状态而成为脆弱的单点时,一个通用的解法是把这些状态外置到一个独立的、本身就具备高可用能力的协调服务(如ZooKeeper)里,让协调者本身变成可以随意重启替换的无状态角色——这比设法让协调者自己实现一套复杂的状态同步/HA机制往往更简单可靠。

结构图:

flowchart TB
  ZK["ZooKeeper<br/>(存储Region寻址入口/schema元数据/RegionServer上下线状态)"]
  ZK -->|"选举/协调"| HM["HMaster(可多个,无状态)<br/>协调RegionServer+元信息管理"]
  ZK -->|"监控上下线"| RS["RegionServer(多个)<br/>存储实际Region,直接处理Client读写"]
  C["Client"] -.->|"读写请求不经过HMaster"| RS
这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《大数据技术体系详解:原理、架构与实践》第7章《分布式结构化存储系统》之"7.3 HBase基本架构"(源文件:_epub-src/OEBPS/text00051.html) - 结论依据:原文说明"与HDFS不同的是,它的master与slave不直接互连,而是通过引入ZooKeeper让两类服务解耦,这使得HBase master变得完全无状态,进而避免了master宕机导致整个集群不可用……HMaster本身是无状态的(所有状态信息均保存在ZooKeeper中),主HMaster挂掉后,不会影响正常的读写服务……Client读写操作过程是不需要与HMaster进行交互的,而是直接与RegionServer通信来完成",直接支撑本卡结构图与结论。 - 原始内容:ZooKeeper内部存储着有关HBase的重要元信息和状态信息,担任着Master与RegionServer之间的服务协调角色。