大数据计算服务MaxCompute每日问答汇总(持续更新中)

简介: 飞天大数据平台计算引擎MaxCompute成为全球首个TPCx-BB认证的公共云产品,是除Hive、Spark以外TPCx-BB第三个标准支持的大数据引擎。

大数据计算服务(MaxCompute,原名ODPS)是一种快速、完全托管的TB/PB级数据仓库解决方案。MaxCompute向用户提供了完善的数据导入方案以及多种经典的分布式计算模型,能够更快速的解决用户海量数据计算问题,有效降低企业成本,并保障数据安全。MaxCompute主要服务于批量结构化数据的存储和计算,可以提供海量数据仓库的解决方案以及针对大数据的分析建模服务。随着社会数据收集手段的不断丰富及完善,越来越多的行业数据被积累下来。数据规模已经增长到了传统软件行业无法承载的海量数据(百GB、TB、乃至PB)级别。在分析海量数据场景下,由于单台服务器的处理能力限制,数据分析者通常采用分布式计算模式。但分布式的计算模型对数据分析人员提出了较高的要求,且不易维护。使用分布式模型,数据分析人员不仅需要了解业务需求,同时还需要熟悉底层计算模型。MaxCompute的目的是为用户提供一种便捷的分析处理海量数据的手段。用户可以不必关心分布式计算细节,从而达到分析大数据的目的。MaxCompute已经在阿里巴巴集团内部得到大规模应用,例如:大型互联网企业的数据仓库和BI分析、网站的日志分析、电子商务网站的交易分析、用户特征和兴趣挖掘等。

MaxCompute以数据为中心,内建多种计算模型和服务接口,满足广泛的数据分析需求。一切服务“开通”即用,更好地赋能数据业务。

image

为了更好的服务MaxCompute的产品用户,产品运营团队推出《MaxCompute每日问答》,不间断更新产品运营团队在服务用户中的常见问题及解答,并进行归类整理,帮助用户更快、更好地解决产品使用问题。

MaxCompute官方帮助文档:https://help.aliyun.com/product/27797.html
云栖社区-阿里巴巴大数据-玩家社区:https://yq.aliyun.com/teams/6

如果您对产品有更多的问题,欢迎加入MaxCompute开发者社区钉钉群咨询群内产品专家,知识小卡片也会优先在群内更新。
点击链接申请加入或扫描二维码
https://h5.dingtalk.com/invite-page/index.html?bizSource=____source____&corpId=dingb682fb31ec15e09f35c2f4657eb6378f&inviterUid=E3F28CD2308408A8&encodeDeptId=0054DC2B53AFE745
image

2019.10.17每日问答
1017
2019.10.18每日问答
1018
2019.10.21每日问答
1021
2019.10.22每日问答
1022
2019.10.23每日问答
1023
2019.10.24每日问答
1024
2019.10.25每日问答
1025
2019.10.28每日问答
1028
2019.10.29每日问答
1029
2019.10.30每日问答
1030
2019.10.31每日问答
1031
2019.11.01每日问答
1101
2019.11.04每日问答
1104
2019.11.05每日问答
1105
2019.11.06每日问答
1106
2019.11.07每日问答
1107
2019.11.08每日问答
1108
2019.11.11每日问答
1111
2019.11.12每日问答
1112
2019.11.13每日问答
1113
2019.11.14每日问答
1114
2019.11.15每日问答
1115
2019.11.18每日问答
1118
2019.11.19每日问答
1119
2019.11.20每日问答
1120
2019.11.21每日问答
1121
2019.11.22每日问答
1122
2019.11.25每日问答
1125
2019.11.26每日问答
1126
2019.11.27每日问答
1127
2019.11.28每日问答
1128
2019.11.29每日问答
1129
2019.12.02每日问答
1202
2019.12.03每日问答
1203
2019.12.04每日问答
1204
2019.12.05每日问答
1205
2019.12.06每日问答
1206
2019.12.09每日问答
1209
2019.12.10每日问答
1210
2019.12.11每日问答
1211
2019.12.12每日问答
1212
2019.12.13每日问答
1213
2019.12.16每日问答
1216
2019.12.17每日问答
1217
2019.12.18每日问答
1218
2019.12.19每日问答
1219
2019.12.20每日问答
1220
2019.12.23每日问答
1223
2019.12.24每日问答
1224
2019.12.25每日问答
1225
2019.12.26每日问答
1226
2019.12.27每日问答
1227
2019.12.30每日问答
1230
2019.12.31每日问答
1231
2020.01.02每日问答
0102
2020.01.03每日问答
0103
2020.01.06每日问答
0106
2020.01.07每日问答
0107
2020.01.08每日问答
0108
2020.01.09每日问答
0109
2020.01.10每日问答
0110
2020.01.13每日问答
0113
2020.01.14每日问答
0114
2020.01.15每日问答
0115
2020.01.16每日问答
0116
2020.01.17每日问答
0117
2020.01.19每日问答
0119
2020.01.20每日问答
0120
2020.01.21每日问答
0121
2020.02.03每日问答
0203
2020.02.04每日问答
0204
2020.02.05每日问答
0205
2020.02.06每日问答
0206
2020.02.07每日问答
0207
2020.02.10每日问答
0210
2020.02.11每日问答
0211
2020.02.12每日问答
0212
2020.02.13每日问答
0213
2020.02.14每日问答
0214
2020.02.17每日问答
0217
2020.02.18每日问答
0218
2020.02.19每日问答
0219
2020.02.20每日问答
0220
2020.02.21每日问答
0221

相关实践学习
基于MaxCompute的热门话题分析
Apsara Clouder大数据专项技能认证配套课程:基于MaxCompute的热门话题分析
相关文章
|
SQL 人工智能 分布式计算
ODPS十五周年实录|构建 AI 时代的大数据基础设施
本文根据 ODPS 十五周年·年度升级发布实录整理而成,演讲信息如下: 张治国:阿里云智能集团技术研究员、阿里云智能计算平台事业部 ODPS-MaxCompute 负责人 活动:【数据进化·AI 启航】ODPS 年度升级发布
605 9
|
存储 SQL 分布式计算
大数据之路:阿里巴巴大数据实践——元数据与计算管理
本内容系统讲解了大数据体系中的元数据管理与计算优化。元数据部分涵盖技术、业务与管理元数据的分类及平台工具,并介绍血缘捕获、智能推荐与冷热分级等技术创新。元数据应用于数据标签、门户管理与建模分析。计算管理方面,深入探讨资源调度失衡、数据倾斜、小文件及长尾任务等问题,提出HBO与CBO优化策略及任务治理方案,全面提升资源利用率与任务执行效率。
935 0
|
存储 分布式计算 大数据
【赵渝强老师】阿里云大数据存储计算服务:MaxCompute
阿里云MaxCompute是快速、全托管的TB/PB级数据仓库解决方案,提供海量数据存储与计算服务。支持多种计算模型,适用于大规模离线数据分析,具备高安全性、低成本、易用性强等特点,助力企业高效处理大数据。
721 0
|
SQL 存储 分布式计算
【万字长文,建议收藏】《高性能ODPS SQL章法》——用古人智慧驾驭大数据战场
本文旨在帮助非专业数据研发但是有高频ODPS使用需求的同学们(如数分、算法、产品等)能够快速上手ODPS查询优化,实现高性能查数看数,避免日常工作中因SQL任务卡壳、失败等情况造成的工作产出delay甚至集群资源稳定性问题。
1972 36
【万字长文,建议收藏】《高性能ODPS SQL章法》——用古人智慧驾驭大数据战场
|
存储 分布式计算 资源调度
【赵渝强老师】阿里云大数据MaxCompute的体系架构
阿里云MaxCompute是快速、全托管的EB级数据仓库解决方案,适用于离线计算场景。它由计算与存储层、逻辑层、接入层和客户端四部分组成,支持多种计算任务的统一调度与管理。
1100 1
|
存储 缓存 分布式计算
OSS大数据分析集成:MaxCompute直读OSS外部表优化查询性能(减少数据迁移的ETL成本)
MaxCompute直读OSS外部表优化方案,解决传统ETL架构中数据同步延迟高、传输成本大、维护复杂等问题。通过存储格式优化(ORC/Parquet)、分区剪枝、谓词下推与元数据缓存等技术,显著提升查询性能并降低成本。结合冷热数据分层与并发控制策略,实现高效数据分析。
|
人工智能 分布式计算 大数据
探索 ODPS:大数据时代的得力助手
在大数据蓬勃发展、 AI 技术席卷各行业的当下,阿里云 ODPS 作为大数据平台体系,凭借其强大的功能和广泛的应用,为众多从业者和企业带来了深远的影响。我有幸深入使用 ODPS,从中收获颇丰。
359 0
|
SQL 人工智能 分布式计算
MaxCompute平台非标准日期和气象数据处理方法--以电力AI赛为例
MaxCompute平台支持的日期格式通常是对齐的日期格式诸如20170725或2017/07/25这种,而本次电力AI赛提供的日期格式却是未对齐的非标准的日期格式2016/1/1这种,使得无法直接使用ODPS SQL中的日期函数来进行处理。
5977 0
|
机器学习/深度学习 传感器 分布式计算
数据才是真救命的:聊聊如何用大数据提升灾难预警的精准度
数据才是真救命的:聊聊如何用大数据提升灾难预警的精准度
767 14
|
机器学习/深度学习 运维 监控
运维不怕事多,就怕没数据——用大数据喂饱你的运维策略
运维不怕事多,就怕没数据——用大数据喂饱你的运维策略
1243 0

相关产品

  • 云原生大数据计算服务 MaxCompute