备案控制台

开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

在实现自定义udf的时候，怎么调整任务的map数呢？

在实现自定义udf的时候，怎么调整任务的map数呢？

展开

收起

游客3oewgrzrf6o5c 2022-08-15 18:04:40 221 0

1 条回答

写回答

取消提交回答

游客mvss26javcocs

需要问一下MaxCompute同学看看了（此答案整理自DataWorks交流群(答疑@机器人)）

2022-08-15 18:15:18

赞同展开评论打赏

问答分类：

大数据开发治理平台 DataWorks

问答地址：

开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 问答

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

相关问答

在实现自定义udf的时候，怎么调整任务的map数呢？比如这个udf，我要调整map数，该怎么操作呢

247

1

0

多元索引并发倒出的demo会先调用ComputeSplits获取并行度，这个接口总是返回1

534

1

0

MapReduce中如何设置map个数？

481

1

0

MapReduce中如何设置map个数是什么？

365

1

0

在运行mapreduce任务中，经常调整的参数有哪些呢？

844

1

0

Hive如何自定义map/reduce数目？

341

1

0

在事先知道输入足够小以适合内存时，可以使用什么样的可配置参数来确保查询在单个map-reduce作业

666

1

0

FileInputFormat切片机制中如何判定一个job的map和reduce的数量呢?

322

1

0

Spark并行度怎么设置才比较合适呢？

336

1

0

WordCount中设置最终数据输出的key和value类型的代码是什么？

359

1

0

大数据与机器学习

大数据开发治理DataWorks

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎，为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

我要提问

热门讨论

热门文章

数据服务报429请求次数过多咋办呀

DataWorks数据质量检测经常出现校验异常的情况。是什么情况？

![aed8b80e32673b27c6a04926e6e34eb4.png](https://uc

数据来源：com.alibaba.fastjson.JSONException: syntax er

dataworks里面的stg层、ods层、dwd层、dws层、是怎么分层的呢？

DataWorks任务流新建里面怎么没有odps任务？

FineReport链接DataWorks之后，查询的明细只能返回1w条。这个限制怎么解除呢？

datax同步完成后，reader表怎么进行修改数据

DataWorks我该如何访问A项目安装了项目的package资源？

DataWorks离线同步MC的表到ADB，并发数是代表dataX的job的数量吗？

展开全部

大数据公共数据集上线，免费试用TB级数据分析

DataWorks常见问题之打开执行后费率计算预估弹窗如何解决

数据中台的智能进化—阿里巴巴十二年数据平台发展历程

DataWorks售前咨询

2万字揭秘阿里巴巴数据治理平台DataWorks建设实践

DataWorks报错问题之使用oss读取csv文件至odps 报错如何解决

DataWorks常见问题之如何将数据集成到oss链路

dataworks常见问题之如何获取oss文件大小

大数据&AI的16种可能，2020阿里云客户最佳实践合集下载

欢迎加入DataWorks产品钉钉交流群

展开全部

相关课程

更多

函数计算的功能与使用入门

5

9

去学习

相关电子书

更多

Apache Flink 流式应用中状态的数据结构定义升级 立即下载

HBase2.0重新定义小对象实时存取 立即下载

低代码开发师（初级）实战教程 立即下载

相关实验场景

更多