开发者社区> 问答> 正文

hdfs读取数据的过程是什么?

hdfs读取数据的过程是什么?

展开
收起
xin在这 2021-12-10 23:48:45 304 0
1 条回答
写回答
取消 提交回答
  • a、client与NameNode通信查询元数据,找到文件块所在的DataNode,namenode将相应的元数据信息返回给client.

    b、client根据元数据信息挑选一台DataNode(网络拓扑上的就近原则,如果都一样,则随机挑选一台DataNode),请求建立socket流,以packet为单位进行发送.

    c、DataNode开始发送数据,客户端以packet为单位接收,先在本地缓存,然后写入目标文件。

    2021-12-10 23:48:58
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
海量数据分布式存储——Apache HDFS之最新进展 立即下载
HBase2.0重新定义小对象实时存取 立即下载
大批量处理excel文件到ODPS中方案 立即下载