知识卡片
NameNode掌元数据
HDFS 把控制面和数据面分开:NameNode 管命名空间和块映射(持久化为 FsImage 和 EditLog),DataNode 存数据块并定期上报心跳;读写数据直接走 DataNode。元数据一丢整个文件系统就瘫痪。书中 Hadoop 0.20 语境靠 Secondary NameNode 合并检查点、宕机时手工接管;它并非热备,自动故障转移要用 Hadoop 2.x 的 NameNode HA。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《云计算:从基础架构到最佳实践》第11章《分布式云存储》(源文件:_epub-src/OEBPS/Text/part0019_split_002.html)
- 结论依据:原文说明HDFS主从架构,名字节点管理目录树和元数据(FsImage、EditLog),数据节点存取数据块;书中把Secondary NameNode称为“备用名字节点”,负责合并FsImage与EditLog,名字节点宕机需手工启动备用节点,并称Hadoop 2.2后名字节点支持集群部署。审查按Apache文档注明:Secondary NameNode只做检查点,不是热备;自动故障转移需Hadoop 2.x的NameNode HA。
- 原始内容:其中名字节点是主节点(master),用于HDFS目录树和元数据管理,对外提供统一命名空间供客户端访问……特别是所维护的FsImage与EditLog文件,一旦丢失,整个文件系统将瘫痪。……●信息归并:周期性将名字节点中命名空间镜像文件FsImage和修改日志EditLog合并,防止日志文件过大。……二是名字节点本身出现宕机,针对这种情况,需要依赖手工启动备用名字节点。