问题一:帮忙看下大数据计算MaxCompute,我这个任务执行时间今天,突然耗时很长,如何解决?
帮忙看下大数据计算MaxCompute,我这个任务执行时间今天,突然耗时很长,如何解决?
参考回答:
参考这个文档看下同步日志。看下是不是等待资源,或者数据量增加了,导致同步任务时间增加。
如果任务配置没有变,可以看下数据源的性能指标,数据源如果没有足够的配置执行查询,也会影响同步任务。
关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/605938
问题二:大数据计算MaxCompute添加权限角色 必须企业版才可以吗?
大数据计算MaxCompute添加权限角色 必须企业版才可以吗?
参考回答:
MaxCompute引擎里的角色得找mc侧操作。项目级角色授权可以看下这里:https://help.aliyun.com/zh/maxcompute/user-guide/perform-access-control-based-on-project-level-roles?spm=a2c4g.11186623.0.0.5fdf24fbZeGHgj#section-3wy-6zg-kk2
关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/605937
问题三:大数据计算MaxCompute生产表,怎么给某人仅可select权限?
大数据计算MaxCompute生产表,怎么给某人仅可select权限?
参考回答:
- 可以单表单表的给用户只授权select权限;
https://help.aliyun.com/zh/maxcompute/user-guide/manage-user-permissions-by-using-commands?spm=a2c4g.11186623.0.0.5244e811YS86PM#1fe48e886cozs - 也可以创建一个角色,把表的select权限都赋给角色后,将用户绑定角色;
https://developer.aliyun.com/article/741866?spm=a2c6h.13262185.0.0.29abb971BR2mgc
关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/605936
问题四:请问maxcomputer为什么不支持delete、update语句?
请问maxcomputer为什么不支持delete、update语句?
参考回答:
MaxCompute(原名ODPS,阿里云的大数据计算服务)早期设计时并不支持传统的SQL中的DELETE和UPDATE语句,主要是由于其设计目标和工作原理所决定的:
- 面向批量处理:MaxCompute设计初衷是用于海量数据的离线批处理,而非在线交易处理(OLTP),它的架构优化了大规模数据集上的批量读写操作,而不是针对单行或小范围数据的实时更新。
- 架构特点:MaxCompute底层基于分布式存储和计算系统,其数据模型和执行引擎并未设计为支持行级别的增删改查(CRUD)操作。传统的数据库通常采用事务机制保证数据的一致性,而MaxCompute这样的大数据处理平台更倾向于通过全表扫描和重写的方式来模拟更新和删除操作,这在大数据场景下效率更高。
- 成本与效率:由于大数据环境下的数据规模巨大,对单行或部分数据的更新、删除操作会导致大量的数据移动和计算资源消耗,这在成本和性能上往往不可接受。
关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/605912
问题五:DataWorks数据集成支持hbase全表写maxcompute表吗?
DataWorks数据集成支持hbase全表写maxcompute表吗?
参考回答:
支持hbase写入maxcompute https://help.aliyun.com/document_detail/181656.html ,
关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/605302