知识卡片
两类核心关系
NameNode 维护两类关系:文件目录树到块列表的映射,以及块到 DataNode 副本的映射。前者持久化在镜像和编辑日志中,后者由 DataNode 启动上报重建。这个拆分减少持久化压力,也依赖节点上报完整性。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《Hadoop技术内幕:深入解析Hadoop Common和HDFS架构设计与实现原理》第8章《名字节点实现》(源文件:_epub-src/EPUB/text00110.html、_epub-src/EPUB/text00124.html)
- 结论依据:原文把目录树与块索引的关系称为第一关系、数据块与数据节点的对应称为第二关系,并说明第一关系通过镜像和编辑日志持久化。
- 原始内容:后面的讨论中,会把与目录树相关,即HDFS目录树、文件/目录元信息和数据块索引间的关系称为名字节点第一关系,数据块和数据节点的对应关系称为名字节点第二关系。……其中,INode及其子类在内存中维护着文件系统的文件目录树,并通过命名空间镜像和编辑日志,将目录树和目录树的改动持久化在磁盘上;保存在名字节点磁盘上的命名空间镜像和编辑日志,会被第二名字节点定时地合并,以产生检查点;FSDirectory是名字节点第一关系的门面,对外提供一个简单的接口。