AI 助理
备案控制台
开发者社区 问答 正文

集合并行化创建得到的RDD分区的数量是怎样的？

集合并行化创建得到的RDD分区的数量是怎样的？

展开
收起
游客coqayqskxr2xe 2021-12-06 20:15:02 535 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 游客jegljo24q422m

    如果是集合并行化创建得到的RDD，分区的数量，默认的和最大可用的cores数量相等。

    2021-12-06 20:15:28
    赞同 展开评论
问答分类：
分布式计算
问答地址：
开发者社区 > 大数据 > 问答
相关问答
如果是两个RDD的表在进行合并，合并的基础是什么？
2210
1
0
RDD 的创建方式是什么？
2222
1
0
RDD能通过什么对结构进行分区呢？
275
1
0
RDD的分区储存在哪？为什么？
444
1
0
Resharding算子与Scan算子之间，分区（shard）遵循什么原则进行重分布？
397
1
0
在map端溢出分区文件和reduce端合并组合有几种情况？
2482
1
0
RDD分区中使用什么可以查看分区数量？
784
1
0
Hive中查看合并后的分区数和小文件数量的代码是什么？
370
1
0
RDD的操作算子包括哪两类？
614
1
0
可以指定分区的数量的创建方式是什么？
644
1
0