AI 助理
备案控制台登录注册
开发者社区 问答 正文

读取外部文件RDD的分区情况是怎么样的？

读取外部文件RDD的分区情况是怎么样的？

展开
收起
游客coqayqskxr2xe 2021-12-06 20:19:06 558 分享
分享
 版权
举报

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 游客jegljo24q422m

    正常情况下，读取HDFS中的文件，默认情况下，读到的文件有几个block块，得到的RDD就有几个分区。

    2021-12-06 20:19:29 举报
    赞同 评论

    评论

    全部评论 (0)

    登录后可评论
问答分类：
分布式计算
问答地址：
开发者社区 > 大数据 > 问答
相关问答
HDFS中读操作为什么可以并行读取啊？
824
1
0
RDD 的创建方式是什么？
2229
1
0
RDD的分区储存在哪？为什么？
450
1
0
RDD能通过什么对结构进行分区呢？
277
1
0
客户端在HDFS中是并行还是串行的对数据块进行访问的呢？
893
1
0
为了避免每次对元数据对象的访问都需要去持久存储中读取多个表的数据怎么办？
392
1
0
RDD通常通过什么上的文件来进行创建？
560
1
0
RDD的数据默认情况下存放在什么地方？
886
1
0
sink进hdfs大量小文件是因为什么原因？
353
1
0
RDD的创建方式是什么？
323
1
0