知识卡片

普通读书笔记卡 · 1773.a.3

联盟按命名空间分治

理解等级:中级

HDFS Federation让多个独立NameNode管理各自命名空间,并共享底层DataNode集群;每个命名空间拥有自己的Block Pool。它扩展管理容量并改善租户间隔离,HA则保护单个命名空间的服务连续性,两者可组合。分治不自动提供跨命名空间的统一事务或全局管理节点。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    • 分布式文件系统 · 查看原书依据

      NameNode联盟的核心思想如图8-9所示,即将一个大的命名空间切割成若干子命名空间,每个子命名空间由单独的NN来负责管理,NN之间独立,相互之间无须做任何协调工作。所有的DataNode被多个NN共享,仍然充当实际数据块的存储场所。而子命名空间和DataNode之间则由数据块管理 层作为中介建立映射关系,数据块管理层由若干数据块池(Pool)构成,每个数据块唯一属于某个固定的数据块池,而一个子命名空间可以对应多个数据块池。

    参考来源

    - 位置:《大数据日知录:架构与算法》第8章《分布式文件系统》,原文段落106(OEBPS/text00013.html)。 - 结论依据:本卡说明书中机制及其适用条件;出版时版本、目标数字与架构状态不作为当前普遍保证。原文错误或过度断言据官方资料限定:[https://hadoop.apache.org/docs/r2.10.0/hadoop-project-dist/hadoop-hdfs/Federation.html](https://hadoop.apache.org/docs/r2.10.0/hadoop-project-dist/hadoop-hdfs/Federation.html)。 - 原始内容:NameNode联盟的核心思想如图8-9所示,即将一个大的命名空间切割成若干子命名空间,每个子命名空间由单独的NN来负责管理,NN之间独立,相互之间无须做任何协调工作。所有的DataNode被多个NN共享,仍然充当实际数据块的存储场所。而子命名空间和DataNode之间则由数据块管理 层作为中介建立映射关系,数据块管理层由若干数据块池(Pool)构成,每个数据块唯一属于某个固定的数据块池,而一个子命名空间可以对应多个数据块池。