知识卡片
文件存储与块存储
文件的三个特征:有限长度的字节流、可追加、可随机读写。文件系统用目录树组织,每层目录存储所含实体的元数据(名称、权限、指针),操作系统逐层跟踪指针找到文件。
文件存储的类型: - 本地磁盘文件系统(NTFS、ext4):支持完全的写后读一致,以锁管理并发写,可支持日记、快照、加密、压缩; - NAS:通过网络提供文件系统,有性能损失但带来冗余、资源池化和共享;要了解多客户端访问同一数据时的一致性模型; - 云文件系统服务(如 EFS):全托管、按量付费,提供本地写后读一致和整个文件系统的关闭后打开一致。
管道中的建议:如果文件存储范式很重要,要小心处理状态、尽量使用短暂环境;即使必须在带磁盘的服务器上处理文件,也用对象存储作为处理步骤之间的中间存储,把手工、低级别的文件操作留给一次性获取或探索阶段。
块存储:SSD 和磁盘提供的原始存储类型,块是最小可寻址单位(旧磁盘 512 字节,现在多为 4096 字节)。事务数据库直接在块级访问磁盘以获得高随机访问性能;块存储也是云虚拟机启动盘的默认选项。RAID 把多块磁盘组合成一个块设备以提升耐久性、性能和容量;SAN 通过网络提供虚拟化块设备。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
- · 第6章 存储
原书出处 · 1 处
- 第6章 存储 · 查看原书依据
即使你必须在有连接磁盘的服务器上处理文件,也要使用对象存储作为处理步骤之间的中间存储。
参考来源
- 位置:《数据工程之道:设计和构建健壮的数据系统》第06章《第6章 存储》6.2.3 文件存储;6.2.4 块存储(源文件:extracted/数据工程之道-设计和构建健壮的数据系统/_epub-src/EPUB/xhtml/Section0012.xhtml,来源项目 book-sources)
- 结论依据:6.2.3节定义文件的三个特征,介绍本地文件系统、NAS、云文件系统的一致性特点,并建议用对象存储做处理步骤间的中间存储;6.2.4节介绍块存储、RAID和SAN。
- 原始内容:即使你必须在有连接磁盘的服务器上处理文件,也要使用对象存储作为处理步骤之间的中间存储。