知识卡片
元数据数据分流
分布式文件系统常把元数据与数据分开处理:元数据服务(MDS)保存目录树和文件到数据块的映射,处理创建、删除、遍历目录;文件数据切块存到底层分布式存储,读写直接发往数据节点。这样读写并发可以扩展,但 MDS 成了关键点,必须做高可用(如 Raft 三副本);元数据量大到要分多个 MDS 时,划分算法很复杂,CephFS 的多 MDS 方案就曾难以保证稳定。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《企业云计算:原理、架构与实践指南 2020》第5章《存储服务》(源文件:_epub-src/OEBPS/Text/chapter14.xhtml)
- 结论依据:原文说明CephFS由MDS保存目录树和文件到对象的映射,多MDS的动态子树划分实现复杂、尚不能承诺生产稳定;平安云EFS把单个文件系统元数据放一个MDS实例并用Raft三副本保障高可用,NAS服务器层将元数据操作和数据操作分流。
- 原始内容:对于CephFS而言,最大的挑战是,如果整个文件系统目录树体量过大需要划分到多个MDS来提供服务时,由于动态子树划分算法的工程实现过于复杂,到目前为止还不能承诺在生产环境上提供足够的稳定性。……接下来,通过著名的Raft协议来保障MDS的高可用。……在NAS服务器层将元数据操作和数据操作分流