知识卡片
读路径定位
读取 HDFS 文件先向 NameNode 获取块位置,再由 DFSInputStream 选择合适 DataNode 建立 BlockReader。NameNode 不传数据,只提供路由;真正吞吐来自客户端直连数据节点。相关:[[主从元数据模型]]。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《Hadoop技术内幕:深入解析Hadoop Common和HDFS架构设计与实现原理》第9章《HDFS客户端》(源文件:_epub-src/EPUB/text00128.html、_epub-src/EPUB/text00129.html)
- 结论依据:原文说明DFSInputStream先获取数据块位置信息,再按读位置取得包含位置信息的LocatedBlock。
- 原始内容:DFSInputStream.callGetBlockLocations()用于获取被打开文件的初始数据块位置信息。……DFSInputStream. getBlockAt()用于获取文件指定位置的LocatedBlock对象,该对象包含了数据块的位置信息。