知识卡片

普通读书笔记卡 · 1773.g

元数据日志与位置重建

理解等级:中级

GFS把命名空间及文件到Chunk的映射写入可恢复的操作日志,并用检查点缩短回放;Chunk所在服务器的位置则通过服务器报告重建。两类元数据恢复来源不同,不能把全部位置都误认为必须从主控本地日志恢复。日志也需要副本与正确更新顺序,内存查询快不代表持久性自动成立。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    • 分布式文件系统 · 查看原书依据

      由于管理数据非常重要,所以其安全性必须得到保障,如果管理数据丢失,那么这个GFS系统也就不可用。GFS将前两类管理信息(命名空间及文件到Chunk映射表)记录在系统日志文件内,并且将这个系统日志分别存储在多台机器上,这样就避免了信息丢失的问题。对于第3类管理数据(Chunk存储在哪台服务器的信息),“主控服务器”在启动时询问每个“Chunk服务器”,之后靠定期询问来保持最新的信息。

    参考来源

    - 位置:《大数据日知录:架构与算法》第8章《分布式文件系统》,原文段落38(OEBPS/text00013.html)。 - 结论依据:本卡说明书中机制及其适用条件;出版时版本、目标数字与架构状态不作为当前普遍保证。 - 原始内容:由于管理数据非常重要,所以其安全性必须得到保障,如果管理数据丢失,那么这个GFS系统也就不可用。GFS将前两类管理信息(命名空间及文件到Chunk映射表)记录在系统日志文件内,并且将这个系统日志分别存储在多台机器上,这样就避免了信息丢失的问题。对于第3类管理数据(Chunk存储在哪台服务器的信息),“主控服务器”在启动时询问每个“Chunk服务器”,之后靠定期询问来保持最新的信息。