知识卡片

普通读书笔记卡 · 2370.a

读路径定位

理解等级:未标注

读取 HDFS 文件先向 NameNode 获取块位置,再由 DFSInputStream 选择合适 DataNode 建立 BlockReader。NameNode 不传数据,只提供路由;真正吞吐来自客户端直连数据节点。相关:[[主从元数据模型]]。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《Hadoop技术内幕:深入解析Hadoop Common和HDFS架构设计与实现原理》第9章《HDFS客户端》(源文件:_epub-src/EPUB/text00128.html、_epub-src/EPUB/text00129.html) - 结论依据:原文说明DFSInputStream先获取数据块位置信息,再按读位置取得包含位置信息的LocatedBlock。 - 原始内容:DFSInputStream.callGetBlockLocations()用于获取被打开文件的初始数据块位置信息。……DFSInputStream. getBlockAt()用于获取文件指定位置的LocatedBlock对象,该对象包含了数据块的位置信息。