知识卡片
元数据日志与位置重建
GFS把命名空间及文件到Chunk的映射写入可恢复的操作日志,并用检查点缩短回放;Chunk所在服务器的位置则通过服务器报告重建。两类元数据恢复来源不同,不能把全部位置都误认为必须从主控本地日志恢复。日志也需要副本与正确更新顺序,内存查询快不代表持久性自动成立。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 分布式文件系统 · 查看原书依据
由于管理数据非常重要,所以其安全性必须得到保障,如果管理数据丢失,那么这个GFS系统也就不可用。GFS将前两类管理信息(命名空间及文件到Chunk映射表)记录在系统日志文件内,并且将这个系统日志分别存储在多台机器上,这样就避免了信息丢失的问题。对于第3类管理数据(Chunk存储在哪台服务器的信息),“主控服务器”在启动时询问每个“Chunk服务器”,之后靠定期询问来保持最新的信息。
参考来源
- 位置:《大数据日知录:架构与算法》第8章《分布式文件系统》,原文段落38(OEBPS/text00013.html)。
- 结论依据:本卡说明书中机制及其适用条件;出版时版本、目标数字与架构状态不作为当前普遍保证。
- 原始内容:由于管理数据非常重要,所以其安全性必须得到保障,如果管理数据丢失,那么这个GFS系统也就不可用。GFS将前两类管理信息(命名空间及文件到Chunk映射表)记录在系统日志文件内,并且将这个系统日志分别存储在多台机器上,这样就避免了信息丢失的问题。对于第3类管理数据(Chunk存储在哪台服务器的信息),“主控服务器”在启动时询问每个“Chunk服务器”,之后靠定期询问来保持最新的信息。