你好,MaxCompute UDAF自定义函数iterate里面是按什么规则分片的按group by的字段吗?UDAF同一个字段值会有两个分片吗,每个分片容量限制是多少?-问答-阿里云开发者社区-阿里云

开发者社区> 问答> 正文

你好,MaxCompute UDAF自定义函数iterate里面是按什么规则分片的按group by的字段吗?UDAF同一个字段值会有两个分片吗,每个分片容量限制是多少?

2017-08-24 14:05:46 4053 1

你好,MaxCompute UDAF自定义函数iterate里面是按什么规则分片的按group by的字段吗?UDAF同一个字段值会有两个分片吗,每个分片容量限制是多少?

取消 提交回答
全部回答(1)
  • 琴瑟
    2019-07-17 21:31:35
    已采纳

    是按照group by分片的,跟聚合函数使用方法类似,比如sum一类。
    以一个group by语句为例,
    数据先根据SQL本身的设置,比如splitsize进行分片,分片后进入map阶段后调用到iterate,然后根据group by进入terminate,中间shuffle阶段可能需要做merge,这样说您不知道是否更加清楚一些

    splitsize请参考
    https://help.aliyun.com/document_detail/27834.html?spm=5176.doc27867.6.584.MQ2zrq

    2 0
相关问答

1

回答

MaxCompute和Hive在Web UI上的区别是什么?

2021-12-08 21:34:15 112浏览量 回答数 1

1

回答

MaxCompute单字段限制8MB的处理思路是什么?

2021-12-08 13:25:36 547浏览量 回答数 1

1

回答

MaxCompute studio SQL的数据操作中 sort by是什么意思呢?

2021-12-11 16:27:01 379浏览量 回答数 1

0

回答

Cloud for Cognitive Computing (AI, Deep Learning...)

2018-06-20 22:16:55 754浏览量 回答数 0

0

回答

maxcompute Py2 odps..execute_sql("desc tab") 问题

2022-01-06 09:45:47 189浏览量 回答数 0

1

回答

操作系统里面的fsmgmt.msc的作用和操作类型是什么?

2021-12-05 18:18:03 76浏览量 回答数 1

1

回答

MaxCompute中导入数据至Hologres的作用是什么呢?

2021-12-12 11:17:11 323浏览量 回答数 1

1

回答

怎么获取MaxCompute 中AccesskeyID和 Access key Secret?

2020-05-26 21:14:11 2695浏览量 回答数 1

1

回答

操作系统里面的devmgmt.msc的作用和操作类型是什么?

2021-12-05 17:46:48 87浏览量 回答数 1

1

回答

MaxCompute有参数可以设置抢占资源吗?同时发起批量SQL,CU是怎么分配的?

2021-03-18 11:10:52 2666浏览量 回答数 1
+关注
祁同伟
胜天半子
903
文章
573
问答
问答排行榜
最热
最新
相关电子书
更多
低代码开发师(初级)实战教程
立即下载
阿里巴巴DevOps 最佳实践手册
立即下载
冬季实战营第三期:MySQL数据库进阶实战
立即下载