知识卡片

结构图卡 · 1730.b.1

ZooKeeper的ZAB读写路径、奇数节点部署与Observer角色

理解等级:未标注

ZooKeeper由奇数个实例组成,一个leader、其余follower,所有数据都放在内存里(读写都快),靠ZAB协议(简化版Paxos)维持副本一致。读路径很简单:任意一个实例都能直接answer读请求,实例越多读吞吐越高。写路径必须经过协调:写请求无论落到哪个实例都会被转发给leader,leader要求”多数(超过一半)实例写成功”才算这次写成功——如果集群有2N+1个实例,只要N+1个写成功即可,这意味着最多能容忍N个实例同时故障。这条”多数派确认”规则直接解释了为什么ZooKeeper总建议部署奇数个实例:2N+1和2N+2个节点的最大容忍故障数都是N(多一个偶数节点并不提高容错能力,反而多花一份成本、多一次网络往返拖慢写延迟),奇数配置在给定容错能力下是最经济的选择。同时ZooKeeper的多副本内存数据并非强一致——ZAB只保证”同一时刻至少多数节点数据一致”,如果客户端必须读到绝对最新的数据,需要显式调用sync接口强制该实例先与leader同步。当集群实例数增多以提升读吞吐时,写延迟也会跟着变差(因为要等更多follower确认),为了打破这个耦合,ZooKeeper引入了Observer角色:功能上像follower(能处理读请求、转发写请求),但不参与”多数派确认”投票,因此增加Observer只会提升读吞吐、不会拖慢写延迟,也不会因为它故障而影响集群的可用性判定(它压根不在容错计数里)。可迁移启发:当一个系统的”扩容”手段同时会拖累另一个关键指标时(这里是”加实例提升读吞吐”却”拖慢写延迟”),可以考虑把”参与一致性投票”和”仅提供读服务/转发”拆成两种不同角色,只对前者的数量做严格约束,后者可以按需自由扩展。

结构图:

flowchart TB
  A["ZooKeeper集群(2N+1个实例)"]
  A --> L["Leader<br/>协调写请求"]
  A --> F["Follower(参与ZAB投票)<br/>读:直接响应<br/>写:转发给Leader,需多数(N+1)确认"]
  A --> O["Observer(不参与投票)<br/>只提供读+转发写<br/>可自由扩展提升读吞吐,不影响写延迟/容错计数"]
  N["容错能力=N<br/>(2N+1与2N+2容错能力相同→建议奇数部署)"] -.-> F
这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《大数据技术体系详解:原理、架构与实践》第8章《分布式协调服务ZooKeeper》之"8.3 ZooKeeper基本架构"(源文件:_epub-src/OEBPS/text00061.html) - 结论依据:原文说明"如果一个集群中存在2N+1个ZooKeeper实例,只要其中N+1个实例写成功,则本次写操作是成功的……由于ZAB协议要求多数写成功即可返回,因此2N+1和2N+2个节点的集群具备的容错能力是相同的……这是建议ZooKeeper部署奇数个实例的最主要原因……为了解决集群扩展性导致写性能下降的问题,ZooKeeper引入了第三个角色:Observer……由于Observer不参与投票过程,因此它出现故障并不会影响ZooKeeper集群的可用性", 直接支撑本卡结构图与结论。 - 原始内容:ZooKeeper实例数目越多,写延迟越高……由于Observer自身能够保存一份数据提供读服务,因此可通过增加Observer实例数提高系统的读吞吐率。