知识卡片

普通读书笔记卡 · 2368

块状态目录化

理解等级:未标注

DataNode 用不同目录承载块状态:写入中、复制临时、已提交和升级分离。把状态映射到文件系统目录,既便于崩溃后恢复,也让本地磁盘结构成为数据块生命周期的外显记录。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《Hadoop技术内幕:深入解析Hadoop Common和HDFS架构设计与实现原理》第7章《数据节点实现》(源文件:_epub-src/EPUB/text00098.html、_epub-src/EPUB/text00101.html) - 结论依据:原文说明数据块先处于blocksBeingWritten或tmp状态,写入顺利结束后提交并迁移到current,复制临时文件则放在detach等目录。 - 原始内容:数据节点上的数据块最开始会处于"blocksBeingWritten"(由客户端写入创建)或"tmp"(由数据块复制写入创建)状态,当数据写入顺利结束后,提交数据块,它们的状态会迁移到"current"。……注意 数据块分离时,需要进行数据块文件复制,复制过程中的临时文件会保存在${dfs.data.dir}/detach目录中,复制结束后,该临时文件才被移动到目标目录中。