AI 助理
备案控制台
开发者社区 问答 正文

Hadoop shuffle中mapreduce提供partitioner接口有什么作用？

Hadoop shuffle中mapreduce提供partitioner接口有什么作用？

展开
收起
游客fq2cv4o24bhvc 2021-12-05 11:00:28 383 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 游客zxdz7pcxbx2uc

    mapreduce提供partitioner接口的作用就是根据key或value及reduce的数量来决定当前的这对输出数据最终交由哪个reduce task处理

    2021-12-05 11:01:53
    赞同 展开评论
问答分类：
分布式计算 Hadoop
问答标签：
hadoop mapreduce mapreduce hadoop mapreduce接口 hadoop mapreduce partitioner hadoop partitioner
问答地址：
开发者社区 > 大数据 > 问答
相关问答
E-MapReduce Hadoop类型集群的ranger-plugin中没有enablehi...
97
1
0
E-MapReduce worker节点/mnt/disk1/log/hadoop-hdfs/...
66
1
0
E-MapReduce索引时MiddleManager提示找不到类com.hadoop.com...
66
1
0
E-MapReduce中出现Apache Hadoop FileUtil.unTar命令注入漏...
75
1
0
E-MapReduce集群在进行Hadoop到StarRocks的迁移过程中如何开启支持UDF...
131
1
0
E-MapReduce集群Hadoop-common和EmrRuntime服务无状态是否需要进...
48
1
0
ECS自建Hadoop集群迁移到E-MapReduce是否需要停机
77
1
0
E-MapReduce如何让hadoop的服务端口暴露在公网上
79
1
0
为什么 E-MapReduce调用API创建hadoop类型的集群返回不支持The opera...
59
1
0
E-MapReduce有哪个接口
50
1
0