AI 助理
备案控制台
开发者社区 问答 正文

Spark RDD中的reduce(func)方法的作用是什么？

Spark RDD中的reduce(func)方法的作用是什么？

展开
收起
游客k7rjnht6hbtk6 2021-12-10 14:09:44 530 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 游客daliwbfb2wo66

    通过函数func聚集数据集中的所有元素。Func函数接受2个参数，返回一个值。这个函数必须是关联性的，确保可以被正确的并发执行。

    2021-12-10 14:09:59
    赞同 展开评论
问答分类：
分布式计算 Spark
问答标签：
apache spark rdd apache spark reduce apache spark方法 apache spark rdd方法 apache spark func方法
问答地址：
开发者社区 > 大数据 > 问答
相关问答
Spark的RDD和DataFrame编程模式如何帮助提升核算效率？
78
1
0
spark 执行RDD操作中的Lazy Calculate有什么好处吗？
2402
1
0
spark 执行RDD操作的过程要注意什么吗？
2374
1
0
spark 中的RDD 有什么特点吗？
2367
1
0
Spark中对于key-value的RDD有什么特别的嘛？
494
1
0
批处理系统中计算过程中可以通过计算的什么来保证数据的一致性（如 Spark 中的 RDD 血缘）？
699
1
0
处理 Spark Streaming 小文件的典型方法的Coalesce大法是什么意思？
750
1
0
Spark中RDD依赖关系宽依赖是什么？
380
1
0
Spark中RDD依赖关系窄依赖是什么？
359
1
0
Spark中RDD依赖关系是什么？
574
1
0