知识卡片
块完成依赖双路上报
HDFS分别维护NameNode上的逻辑block状态和DataNode上的副本状态。写入中,前者为UnderConstruction,后者为rbw;管道结束后副本变为finalized。客户端上报使逻辑块进入Committed,DataNode的完成报告使其进入Complete。关闭文件还需检查块完成条件。传完最后一个packet、客户端认为写完和元数据确认块可关闭,是三个不同事件,排查悬挂文件时不能只看客户端。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 开源的文件系统HDFS · 查看原书依据
客户端在DN上创建这个block的副本,并且为该block创建pipeline,这时这个副本的状态被标记为rbw(replica being written to),表示该副本处于建立状态(即调用create后)或者追加状态(即调用append后)。
参考来源
- 位置:《分布式系统与一致性》第3章《开源的文件系统HDFS》(来源项目:book-sources;源文件:extracted/分布式系统与一致性/_epub-src/OEBPS/Text/chapter7.xhtml)
- 结论依据:原文的组件职责、状态变化或故障分支支撑本卡所述机制与边界;历史产品行为仅按本章语境解释。
- 原始内容:客户端在DN上创建这个block的副本,并且为该block创建pipeline,这时这个副本的状态被标记为rbw(replica being written to),表示该副本处于建立状态(即调用create后)或者追加状态(即调用append后)。