知识卡片
副节点不是备份
名字极具误导性。Secondary NameNode 做的是”帮忙”而不是”接班”:它周期性地把 NameNode 的编辑日志合并进文件系统映像,减轻 NameNode 负担,让重启时不必回放很长的日志。它不持有实时元数据,因此 NameNode 崩溃时无法接管。
真正的风险在 NameNode 本身:元数据常驻内存以保证性能,一旦它不可用或损坏,集群上的数据实际上都不可读——这是典型的单点故障。缓解手段有三层:
- 把 NameNode 放在专用机器上,减少资源争抢;
- 定期备份映像与编辑日志,故障后用最近映像加日志回放重建;
- 启用 HDFS 高可用(HA):两个 NameNode,一主一备,活动节点故障时待机节点接管;启用 HA 后不再需要 Secondary NameNode。
判断要点:看到 Secondary 不要读成”备用”。冗余必须靠 HA 或外部备份实现,靠这个名字会误判风险。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 第10章 高级分析技术与工具:MapReduce和Hadoop · 查看原书依据
第三个守护进程Secondary NameNode,提供了执行某些NameNode任务的功能,以减轻NameNode的负担。这样的任务包括用文件系统编辑日志的内容来更新文件系统映像。需要重点注意的是,Secondary NameNode不是NameNode的备份或冗余。当NameNode瘫痪时,必须重新启动NameNode,并使用最近的文件系统映像文件和编辑日志的内容来初始化。
参考来源
- 位置:《数据科学与大数据分析 数据的发现 分析 可视化与表示》第10章 高级分析技术与工具:MapReduce和Hadoop(源文件:extracted/数据科学与大数据分析 数据的发现 分析 可视化与表示/_epub-src/text/part0020_split_001.html)
- 结论依据:依据 10.1.3 节对 Secondary NameNode 职责的界定、它不是备份或冗余的明确说明,以及 HDFS 高可用特性的介绍。
- 原始内容:第三个守护进程Secondary NameNode,提供了执行某些NameNode任务的功能,以减轻NameNode的负担。这样的任务包括用文件系统编辑日志的内容来更新文件系统映像。需要重点注意的是,Secondary NameNode不是NameNode的备份或冗余。当NameNode瘫痪时,必须重新启动NameNode,并使用最近的文件系统映像文件和编辑日志的内容来初始化。