备案控制台
探索云世界
开发者社区 大数据与机器学习 大数据计算 MaxCompute 文章 正文

2020阿里巴巴大数据技术公开课第五季 — SaaS模式云数据仓库MaxCompute开发实战与常见问题

2020-12-16 949
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介： MaxCompute（原ODPS）作为SaaS模式云数据仓库，以Serverless架构提供快速、全托管的在线数据仓库服务，消除传统数据平台在资源扩展性和弹性方面的限制，最小化用户运维投入，使您经济并高效的分析处理海量数据。

2020阿里巴巴大数据技术公开课不知不觉已到第五季，这一季我们会围绕 SaaS模式云数据仓库MaxCompute的开发实战与常见问题为各位 MaxCompute 开发者进行讲解和演示，欢迎共同学习。观看直播，请扫下图二维码，加入直播钉群即可观看。



「 第一讲」MaxCompute Logview2.0 参数详解及常见问题  

直播时间：2020年12月16日 17:00-17:30

直播简介：本次直播内容涵盖Logview 2.0 原理与功能介绍，以及Logview 2.0 分析问题作业讲解。

直播回看 >>

阅读文字版 >>



「 第二讲」MaxCompute Spark 使用和常见问题

直播时间：2020年12月23日 17:00-17:30

直播简介：本次直播将就MaxCompute Spark开发环境搭建、常用配置、作业迁移注意事项以及常见问题进行深入介绍。

直播回看 >>

阅读文字版 >>



「 第三讲」MaxCompute 消费预警与控制

直播时间：2020年12月30日 17:00-17:30

直播简介：本次直播将为您介绍如何通过MaxCompute消费控制及预警设置等内容，实现对作业的成本控制。

直播回看 >>

文字版 敬请期待



「 第四讲」MaxCompute Tunnel技术原理及开发实战

直播时间：2021年1月6日 17:00-17:30

直播简介：本次直播主要内容涵盖Tunnel的原理，开发、最佳实践以及最新功能。

直播回看 >>

文字版 敬请期待


MaxCompute官网 >>

2020阿里巴巴大数据技术公开课第五季 — SaaS模式云数据仓库MaxCompute开发实战与常见问题 >>

2020阿里巴巴大数据技术公开课第四季 — MaxCompute 持续定义 SaaS 模式云数据仓库 >>

2020阿里巴巴大数据技术公开课第三季 — 阿里巴巴飞天大数据产品价值解读 >>

2020阿里巴巴大数据技术公开课第二季 —SaaS模式云数据仓库MaxCompute的聪明买与智慧用 >>

2020阿里巴巴大数据技术公开课第一季 — 从开源到云原生，你不得不知的大数据实战 >>

2019 阿里巴巴大数据技术公开课年度合集（第一季~第六季）>>

长图新.png




文章标签：
云原生大数据计算服务 MaxCompute
Cloud Native
分布式计算
运维
Spark
Serverless
大数据
开发者
MaxCompute
关键词：
saas模式
云原生大数据计算服务 MaxCompute MaxCompute
云原生大数据计算服务 MaxCompute模式
云数据仓库
数据仓库模式
相关实践学习
简单用户画像分析
本场景主要介绍基于海量日志数据进行简单用户画像分析为背景，如何通过使用DataWorks完成数据采集 、加工数据、配置数据质量监控和数据可视化展现等任务。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品，是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法，从场景到实践，体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库，助力开发者学习了解先进的技术栈，并能在实际业务中敏捷的进行大数据分析，赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景，可应用MaxCompute实现数仓搭建，快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理，需要搭建数据仓库？学它！ 没有足够人员和经验来运维大数据平台，不想自建IDC买机器，需要免运维的大数据平台？会SQL就等于会大数据？学它！ 想知道大数据用得对不对，想用更少的钱得到持续演进的数仓能力？获得极致弹性的计算资源和更好的性能，以及持续保护数据安全的生产环境？学它！ 想要获得灵活的分析能力，快速洞察数据规律特征？想要兼得数据湖的灵活性与数据仓库的成长性？学它！ 出品人：阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
晋恒
目录
相关文章
桃李春风一杯酒
|
25天前
|
分布式计算 Hadoop 大数据
大数据技术与Python：结合Spark和Hadoop进行分布式计算
【4月更文挑战第12天】本文介绍了大数据技术及其4V特性，阐述了Hadoop和Spark在大数据处理中的作用。Hadoop提供分布式文件系统和MapReduce，Spark则为内存计算提供快速处理能力。通过Python结合Spark和Hadoop，可在分布式环境中进行数据处理和分析。文章详细讲解了如何配置Python环境、安装Spark和Hadoop，以及使用Python编写和提交代码到集群进行计算。掌握这些技能有助于应对大数据挑战。
桃李春风一杯酒
55 1
听风de歌
|
25天前
|
存储 数据采集 数据可视化
大数据处理技术
【4月更文挑战第10天】大数据处理涵盖采集、预处理、存储、分析挖掘、展现和应用等关键步骤。采集涉及多种类型数据，预处理确保数据质量，存储管理关注规模、速度和安全，分析挖掘利用机器学习发现价值，展现和应用则通过可视化和检索实现数据价值。云计算和AI强化了大数据处理能力，整体目标是提取数据中的价值，驱动企业和社会进步。
听风de歌
32 4
大数据处理技术
1941623231718325
|
5天前
|
存储 机器学习/深度学习 数据采集
大数据处理与分析实战：技术深度剖析与案例分享
【5月更文挑战第2天】本文探讨了大数据处理与分析的关键环节，包括数据采集、预处理、存储、分析和可视化，并介绍了Hadoop、Spark和机器学习等核心技术。通过电商推荐系统和智慧城市交通管理的实战案例，展示了大数据在提高用户体验和解决实际问题上的效能。随着技术进步，大数据处理与分析将在更多领域发挥作用，推动社会进步。
1941623231718325
18 2
三分钟热度的鱼
|
9天前
|
Cloud Native 关系型数据库 MySQL
云原生数据仓库产品使用合集之在云数据仓库ADB中，GROUP BY操作中出现NULL值,如何解决
阿里云AnalyticDB提供了全面的数据导入、查询分析、数据管理、运维监控等功能，并通过扩展功能支持与AI平台集成、跨地域复制与联邦查询等高级应用场景，为企业构建实时、高效、可扩展的数据仓库解决方案。以下是对AnalyticDB产品使用合集的概述，包括数据导入、查询分析、数据管理、运维监控、扩展功能等方面。
三分钟热度的鱼
573 0
穿过生命散发芬芳
|
17天前
|
存储 数据可视化 大数据
大数据技术框架
【4月更文挑战第20天】大数据一般需要经过6个主要环节，包括数据收集、数据存储、资源管理与服务协调、计算引擎、数据分析和数据可视化。
穿过生命散发芬芳
30 0
jlbookworm
|
SQL 人工智能 分布式计算
MaxCompute平台非标准日期和气象数据处理方法--以电力AI赛为例
MaxCompute平台支持的日期格式通常是对齐的日期格式诸如20170725或2017/07/25这种，而本次电力AI赛提供的日期格式却是未对齐的非标准的日期格式2016/1/1这种，使得无法直接使用ODPS SQL中的日期函数来进行处理。
jlbookworm
5267 0
三分钟热度的鱼
|
8天前
|
分布式计算 大数据 BI
MaxCompute产品使用合集之MaxCompute项目的数据是否可以被接入到阿里云的Quick BI中
MaxCompute作为一款全面的大数据处理平台，广泛应用于各类大数据分析、数据挖掘、BI及机器学习场景。掌握其核心功能、熟练操作流程、遵循最佳实践，可以帮助用户高效、安全地管理和利用海量数据。以下是一个关于MaxCompute产品使用的合集，涵盖了其核心功能、应用场景、操作流程以及最佳实践等内容。
三分钟热度的鱼
198 0
三分钟热度的鱼
|
8天前
|
SQL 分布式计算 大数据
MaxCompute产品使用合集之怎样可以将大数据计算MaxCompute表的数据可以导出为本地文件
MaxCompute作为一款全面的大数据处理平台，广泛应用于各类大数据分析、数据挖掘、BI及机器学习场景。掌握其核心功能、熟练操作流程、遵循最佳实践，可以帮助用户高效、安全地管理和利用海量数据。以下是一个关于MaxCompute产品使用的合集，涵盖了其核心功能、应用场景、操作流程以及最佳实践等内容。
三分钟热度的鱼
189 0
三分钟热度的鱼
|
8天前
|
分布式计算 DataWorks 关系型数据库
MaxCompute产品使用合集之可以使用什么方法将MySQL的数据实时同步到MaxCompute
MaxCompute作为一款全面的大数据处理平台，广泛应用于各类大数据分析、数据挖掘、BI及机器学习场景。掌握其核心功能、熟练操作流程、遵循最佳实践，可以帮助用户高效、安全地管理和利用海量数据。以下是一个关于MaxCompute产品使用的合集，涵盖了其核心功能、应用场景、操作流程以及最佳实践等内容。
三分钟热度的鱼
19 1
xin在这
|
7天前
|
分布式计算 DataWorks 数据库
DataWorks操作报错合集之DataWorks使用数据集成整库全增量同步oceanbase数据到odps的时候，遇到报错，该怎么处理
DataWorks是阿里云提供的一站式大数据开发与治理平台，支持数据集成、数据开发、数据服务、数据质量管理、数据安全管理等全流程数据处理。在使用DataWorks过程中，可能会遇到各种操作报错。以下是一些常见的报错情况及其可能的原因和解决方法。
xin在这
21 0
大数据与机器学习

大数据计算 MaxCompute

热门文章

最新文章

  • 1
    odps是什么?
  • 2
    使用 odps-jdbc 接入 ODPS，不再从零开始
  • 3
    品《阿里巴巴大数据实践-大数据之路》一书（上）
  • 4
    10年老兵带你看尽MaxCompute大数据运算挑战与实践
  • 5
    如何有效降低大数据平台安全风险
  • 6
    阿里云大数据计算平台的自动化、精细化运维之路
  • 7
    10月18日，德国法兰克福，阿里云MaxCompute2.0，全面布局AI人工智能
  • 8
    Logstash + DataHub + MaxCompute/StreamCompute 进行实时数据分析
  • 9
    SQL优化器原理 - Auto Hash Join
  • 10
    Python实现MaxCompute UDF/UDAF/UDTF
  • 1
    MaxCompute产品使用合集之大数据计算MaxCompute底层加速查询的原理是什么
    251
  • 2
    MaxCompute产品使用合集之大数据计算MaxCompute如何实现通过离线同步脚本模式
    248
  • 3
    MaxCompute产品使用合集之MaxCompute项目的数据是否可以被接入到阿里云的Quick BI中
    198
  • 4
    MaxCompute产品使用合集之怎样可以将大数据计算MaxCompute表的数据可以导出为本地文件
    189
  • 5
    MaxCompute产品使用合集之大数据计算MaxCompute是否支持直接在多个节点之间进行批量复制
    211
  • 6
    MaxCompute产品使用合集之大数据计算MaxCompute对于某个特定表该怎么获取，特定分区的instances id
    191
  • 7
    MaxCompute产品使用合集之怎么将事务表改为普通分区表
    177
  • 8
    MaxCompute产品使用合集之要查看MaxCompute Studio中的项目中的计算任务代码，我该怎么操作
    137
  • 9
    MaxCompute产品使用合集之MaxCompute的性能受到哪些因素的影响
    119
  • 10
    MaxCompute产品使用合集之大数据计算MaxCompute是否支持递归
    125

    • 相关产品

  • 云原生大数据计算服务 MaxCompute
    文档详情 产品详情

    • 相关课程

    更多
  • 基于Flink的实时大数据应用Demo
  • 高校精品课-华东师范大学-数据仓库与商务智能
  • SaaS模式云数据仓库实战
  • 数据分析系统之数据管理与数据仓库
  • 阿里云云原生数据仓库AnalyticDB MySQL版 使用教程
  • SaaS 模式云数据仓库必修课

    • 相关电子书

    更多
  • 基于阿里云MaxCompute构建企业云数据仓库CDW的最佳实践建议
  • PostgresChina2018_陶征霖_新一代数据仓库OushuDB架构剖析
  • MaxCompute数据仓库数据转换实践

    • 相关实验场景

    更多
  • 数据湖构建DLF快速入门
  • 阿里云上云入门
  • MMA大数据迁移实训
  • 通过FastMR自动拉起大数据集群并运行TPCDS任务
  • 基于Serverless架构的盲盒抽奖系统
  • EMR数据湖开发治理之用户画像分析
    • 下一篇
    将Stable Diffusion模型文件转存到FC环境的NAS