MaxCompute产品使用合集之odps.sql.mapper.split.size和odps.stage.mapper.split.size这两个参数的区别是什么

问题一：大数据计算MaxCompute pyodps里这两个配置都支持吗?

大数据计算MaxCompute pyodps里这两个配置都支持吗?

参考答案：

支持。都是session级别

关于本问题的更多回答可点击进行查看：

https://developer.aliyun.com/ask/574956

问题二：请问大数据计算MaxCompute 有没有区别？

请问大数据计算MaxCompute odps.sql.mapper.split.size 和 odps.stage.mapper.split.size有没有区别？感觉是一样的啊，都是根据输入数据量所需存储动态分配mapper个数

参考答案：

stage.mapper.split.size 是设置每个map worker的输入数据量，框架会参考设置的Split Size值来划分Map，决定Map的个数。

sql.mapper.split.size是设定一个map的最大数据输入量，单位MB。最大值和直接固定一个值 是不一样的。

关于本问题的更多回答可点击进行查看：

https://developer.aliyun.com/ask/574955

问题三：大数据计算MaxCompute dataworks页面进去是这样，什么原因？

大数据计算MaxCompute dataworks页面进去是这样，什么原因？

参考答案：

这个相当于责任说明，可以点击关闭或者完成就行了

关于本问题的更多回答可点击进行查看：

https://developer.aliyun.com/ask/574954

问题四：请问大数据计算MaxCompute有主键这种说法么?

请问大数据计算MaxCompute有主键这种说法么?或者如果想在插入数据时实现覆盖更新,需要从哪个方面?

参考答案：

MaxCompute 普通表是不支持的。 只有事务表可以。https://help.aliyun.com/zh/maxcompute/user-guide/transaction-table2-0-overview?spm=a2c4g.11174283.0.i5

用Flink 写https://help.aliyun.com/zh/maxcompute/user-guide/use-flink-streaming-data-transmission-new-version?spm=a2c4g.11186623.0.i11 

关于本问题的更多回答可点击进行查看：

https://developer.aliyun.com/ask/574953

问题五：大数据计算MaxCompute正常spark那些他应该变成：123::456才对吗?

大数据计算MaxCompute正常spark那些他应该变成：123::456才对?

参考答案：

spark-sql> select concat_ws(':','avg',null,'34');

avg:34

Time taken: 0.101 seconds, Fetched 1 row(s)

这个函数会忽略参数为null的值，但不会忽略空字符串。

关于本问题的更多回答可点击进行查看：

https://developer.aliyun.com/ask/574952