MaxCompute问题之计算资源利用如何解决

简介: MaxCompute资源指的是在MaxCompute项目中使用的计算资源和存储资源;本合集旨在向用户展示如何高效管理MaxCompute资源,包括资源包管理、配额调整和性能优化等方面。

问题一:MaxCompute在包年包月计费模式下,计算资源是如何利用的?


MaxCompute在包年包月计费模式下,计算资源是如何利用的?


参考回答:

包年包月的资源是独享型资源,MaxCompute会根据您购买的资源量分配固定数量的计算资源,您可以对计算资源设置配额组、并设置分时时段,请参见MaxCompute管家。包年包月资源最佳实践,请参见包年包月资源分时配额包年包月资源隔离

但是当同一地域已经开通按量计费模式时,如果作业量较大,您可以考虑对于消耗资源少的作业采用包年包月计费模式,消耗资源较大的作业采用按量计费模式,保证作业运行时一直有计算资源。更多包年包月项目使用按量计费资源信息,请参见包年包月项目使用按量计费资源


关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/501976?spm=a2c6h.14164896.0.0.7b0832e9NIU66G


问题二:MaxCompute按量计费模式转为包年包月模式时,如何评估需要购买多少计算资源?


MaxCompute按量计费模式转为包年包月模式时,如何评估需要购买多少计算资源?


参考回答:

您需要结合具体的作业评估需要购买的计算资源(CU)数量。建议您先购买少量计算资源,后续根据具体使用情况,再进行调整。计算资源购买量建议50 CU起购。

购买包年包月计算资源后,您可以通过如下方式监控资源的使用情况:

更多资源规划建议,请参见资源规划及规格选型


关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/501975?spm=a2c6h.14164896.0.0.7b0832e9NIU66G


问题三:maxcompute的资源隔离是针对项目级?能否访问跨项目的数据?


maxcompute的资源隔离是针对项目级?能否访问跨项目的数据?


参考回答:

当前MaxCompute的包年包月CU可以设置 独占quota。https://help.aliyun.com/document_detail/66565.htm MaxCompute也支持跨项目访问数据,可以添加账号或者做package授权。https://help.aliyun.com/document_detail/34602.html


关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/460154?spm=a2c6h.14164896.0.0.b77732e9if5g2K


问题四:MaxCompute 所提供的预付费资源监控报警能力有什么作用?


MaxCompute 所提供的预付费资源监控报警能力有什么作用?


参考回答:

MaxCompute 所提供的预付费资源监控报警能力基于阿里云所提供的云监控服务,并且结合了配额组 CPU 使用量、作业等待等待数、内存使用量、整体 CPU 使用率等一些关键指标,通过对以上这些指标进行规则配置,就能实现对于关键事件的短信通知以及实时告警,从而帮助用户更好地管理和使用资源。

以上内容摘自《大数据工程师必读手册》电子书,点击https://developer.aliyun.com/topic/download?id=29可下载完整版


关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/446555?spm=a2c6h.14164896.0.0.b77732e9if5g2K


问题五:如何评估MaxCompute存储资源和计算资源?


如何评估MaxCompute存储资源和计算资源?


参考回答:

可以参考一下这篇文章:https://developer.aliyun.com/article/771967


关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/312366?spm=a2c6h.14164896.0.0.b77732e9if5g2K

相关实践学习
简单用户画像分析
本场景主要介绍基于海量日志数据进行简单用户画像分析为背景,如何通过使用DataWorks完成数据采集 、加工数据、配置数据质量监控和数据可视化展现等任务。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
目录
相关文章
|
1月前
|
SQL 分布式计算 DataWorks
DataWorks常见问题之maxcompute资源打开失败如何解决
DataWorks是阿里云提供的一站式大数据开发与管理平台,支持数据集成、数据开发、数据治理等功能;在本汇总中,我们梳理了DataWorks产品在使用过程中经常遇到的问题及解答,以助用户在数据处理和分析工作中提高效率,降低难度。
|
2月前
|
SQL 分布式计算 监控
MaxCompute提供了一些工具以帮助您监控作业和资源使用情况。
【2月更文挑战第4天】MaxCompute提供了一些工具以帮助您监控作业和资源使用情况。
27 8
|
2月前
|
DataWorks 关系型数据库 MySQL
dataworks问题之数据源一直失败如何解决
DataWorks数据集是指在阿里云DataWorks平台内创建、管理的数据集合;本合集将介绍DataWorks数据集的创建和使用方法,以及常见的配置问题和解决方法。
33 2
|
2月前
|
DataWorks 关系型数据库 对象存储
dataworks数据集问题之同步任务如何解决
DataWorks数据集是指在阿里云DataWorks平台内创建、管理的数据集合;本合集将介绍DataWorks数据集的创建和使用方法,以及常见的配置问题和解决方法。
41 4
|
2月前
|
DataWorks 关系型数据库 MySQL
dataworks问题之数据源创建如何解决
DataWorks数据集是指在阿里云DataWorks平台内创建、管理的数据集合;本合集将介绍DataWorks数据集的创建和使用方法,以及常见的配置问题和解决方法。
33 3
|
1月前
|
数据采集 分布式计算 DataWorks
DataWorks常见问题之dataworks引用maxcompute资源失败如何解决
DataWorks是阿里云提供的一站式大数据开发与管理平台,支持数据集成、数据开发、数据治理等功能;在本汇总中,我们梳理了DataWorks产品在使用过程中经常遇到的问题及解答,以助用户在数据处理和分析工作中提高效率,降低难度。
|
2月前
|
分布式计算 DataWorks NoSQL
MaxCompute资源问题之网络不通如何解决
DataWorks数据集是指在阿里云DataWorks平台内创建、管理的数据集合;本合集将介绍DataWorks数据集的创建和使用方法,以及常见的配置问题和解决方法。
34 2
|
2月前
|
DataWorks 关系型数据库 分布式数据库
dataworks数据集问题之数据中台报错如何解决
DataWorks数据集是指在阿里云DataWorks平台内创建、管理的数据集合;本合集将介绍DataWorks数据集的创建和使用方法,以及常见的配置问题和解决方法。
36 1
|
2月前
|
DataWorks API 数据安全/隐私保护
dataworks数据集问题之获取表列表失败如何解决
DataWorks数据集是指在阿里云DataWorks平台内创建、管理的数据集合;本合集将介绍DataWorks数据集的创建和使用方法,以及常见的配置问题和解决方法。
46 6
|
2月前
|
DataWorks NoSQL 关系型数据库
dataworks数据集问题之归档存储报错如何解决
DataWorks数据集是指在阿里云DataWorks平台内创建、管理的数据集合;本合集将介绍DataWorks数据集的创建和使用方法,以及常见的配置问题和解决方法。
26 3