Hadoop 读数据的流程是怎样的？
Hadoop 读数据的流程是怎样的？
展开
收起
来自：
开发者社区官方技术圈
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
1
条回答
写回答
-
Hadoop 读数据的简易流程如下图所示，
（1）客户端发出读数据请求，请求 NameNode 的元数据。
（2）NameNode 将元数据信息返回给客户端。
（3）客户端根据 NameNode 返回的元数据信息，到对应的 DataNode 中读取块数据，如果读取的文件比较大，则会被 Hadoop 切分为多个数据块，保存到不同的 DataNode 中。
（4）读取完 3 的数据块后，如果数据未读取完，则接着读取数据。
（5）读取完 4 的数据块后，如果数据未读取完，则接着读取数据。
（6）读完所有数据之后，通知 NameNode 关闭数据流。
以上内容摘自《海量数据处理与大数据技术实战》电子书，点击https://developer.aliyun.com/topic/download?id=8205可下载完整版
2022-01-13 20:25:04赞同 展开评论
相关问答
