阿里云 MaxCompute 2020-5 月刊

简介: MaxCompute迁移工具MMA2.0新版本发布,MMA2.0不仅在技术架构上做了重构,在功能上也有重大升级,提升了迁移效率和运行稳定性的同时,在操作体验上也更加自动化和智能化。更多5月产品动态,欢迎阅读MaxCompute5月刊。

导读

【5月新发布功能】

【5月新发布文档】

【5月精选技术文章】


【5月新发布功能】

1. MaxCompute迁移工具MMA2.0新版本发布

MMA2.0在技术架构上做了重构,在功能上也有重大升级,不仅提升了迁移效率和运行稳定性,在操作体验上也更加自动化和智能化。

适用客户
需要从Hadoop迁移到MaxCompute的客户

版本/规格功能
MMA在功能和架构上都做了重大升级,支持C/S架构,实现了队列的智能化调度管理、数据迁移中的自动重试和断点续传、数据校验和增量更新的功能。与1.0相比极大提升了易用性、稳定性和迁移效率。

查看文档 >>


2. MaxCompute支持 PyODPS Python3 节点

MaxCompute 在 DataWorks 上增加 PyODPS Python3 节点,实现开发者对Python 3新特性应用。

适用客户
PyODPS开发者,数据分析师等

发布功能
DataWorks公共云可以支持pyodps python3 的开发,实现对python3 新特性的支持,提升数据处理的能力。



【5月新发布文档】

  1. 新增Spark访问OSS配置说明。
  2. MMA迁移工具升级为2.0版本,更新如下文档:



【5月精选技术文章】

  1. SaaS模式云数据仓库MaxCompute 百问合集(持续更新20200604)
  2. 如何使用MaxCompute Spark读写阿里云Hbase
  3. 阿里巴巴经济体核心调度系统伏羲技术揭秘



阅读往期月刊 >>


更多阿里巴巴大数据计算技术和产品交流,可申请加入“MaxCompute开发者社区钉钉群”
image

相关实践学习
基于MaxCompute的热门话题分析
Apsara Clouder大数据专项技能认证配套课程:基于MaxCompute的热门话题分析
目录
相关文章
|
存储 分布式计算 运维
【2023云栖】刘一鸣:Data+AI时代大数据平台建设的思考与发布
本文根据2023云栖大会演讲实录整理而成,演讲信息如下: 演讲人:刘一鸣 | 阿里云自研大数据产品负责人 演讲主题:Data+AI时代大数据平台应该如何建设
103957 16
|
SQL 分布式计算 BI
MaxCompute笛卡尔积逻辑的参数优化&复杂JOIN逻辑优化
这篇文章主要讲一个SQL优化反映的两个优化点。分别是: 一、笛卡尔积逻辑的参数优化。 二、一个复杂JOIN逻辑的优化思路。
3208 2
MaxCompute笛卡尔积逻辑的参数优化&复杂JOIN逻辑优化
|
存储 弹性计算 Linux
省钱小贴士(ECS):教你如何每年省出8w+ 块
随着用户越来越多地使用阿里云的ECS服务,如何用最小的成本来保有ECS,成为用户越来越重要的关注点。为了更好的服务客户,ECS团队调整了系统盘的最小容量限制。
20140 117
|
Dubbo 应用服务中间件
分布式服务框架Dubbo疯狂更新!阿里开源要搞大事情?
最近,开源社区发生了一件大事,那个全国开发使用最广的开源服务框架Dubbo低调重启维护,并且3个月连续发布了3个维护版本。这3个维护版本不仅解决了社区关心的一系列问题和需求,还让整个社区的活跃度得到了大幅提升。
29216 175
|
存储 SQL 分布式计算
阿里云云原生一体化数仓 — 湖仓一体新能力解读
本文主要介绍如何通过湖仓一体,打通 MaxCompute 与 Hadoop、DLF/OSS 数据湖,以及 Hologres、MySQL 等数据平台,并通过 DataWorks 做统一数据开发和治理。
3846 1
阿里云云原生一体化数仓 — 湖仓一体新能力解读
|
存储 分布式计算 DataWorks
阿里云云原生一体化数仓 — 数据治理新能力解读
本文介绍大数据开发治理平台DataWorks在数据治理领域的最新产品进展,包括基于事前、事中、事后的全链路理念构建的核心产品功能和数据治理量化评估机制解读,以及围绕降本增效的成本治理最佳实践。
4979 0
阿里云云原生一体化数仓 — 数据治理新能力解读
|
存储 人工智能 分布式计算
阿里云云原生一体化数仓 — 离线实时一体化新能力解读
介绍MaxCompute+Hologres离线和实时数仓一体化优于之前有离线、有在线、有很多不同的引擎的实现方案,通过用实时的引擎做预处理,实现离线实时数据入仓后做更加实时的服务化BI分析实践。
3578 1
阿里云云原生一体化数仓 — 离线实时一体化新能力解读
|
弹性计算 负载均衡 Cloud Native
Soul 云原生网关最佳实践
Soul 是基于兴趣图谱和游戏化玩法的产品设计,属于新一代年轻人的虚拟社交网络。成立于2016年,Soul 致力于打造一个“年轻人的社交元宇宙”,最终愿景是“让天下没有孤独的人”。
Soul 云原生网关最佳实践
|
资源调度 大数据 调度
独家下载 | “伏羲”神算!阿里巴巴经济体核心调度系统揭秘
阿里巴巴 9 位技术专家为你深度解析阿里巴巴经济体核心调度系统“伏羲”。伏羲(Fuxi)作为十年前最初创立飞天平台时的三大服务之一(分布式存储 Pangu,分布式计算 MaxCompute,分布式调度 Fuxi),十年来,在技术能力上持续演进。本书从面向大数据、云计算的调度挑战出发,介绍伏羲调度系统及各子领域的关键技术进展,并以双11为典型场景进行最佳实践的介绍,为你呈现大数据分布式调度技术的深水区玩法。— 《“伏羲”神算》现在可以免费下载阅读啦,快来先睹为快吧。
39233 0
独家下载 | “伏羲”神算!阿里巴巴经济体核心调度系统揭秘
|
资源调度 分布式计算 大数据
面向大数据与云计算调度挑战的阿里经济体核心调度系统—Fuxi 2.0全揭秘
随阿里经济体和阿里云丰富的业务需求(尤其是双十一)和磨练,伏羲的内涵不断扩大,从单一的资源调度器(对标开源系统的YARN)扩展成大数据的核心调度服务,覆盖数据调度(Data Placement)、资源调度(Resouce Management)、计算调度(Application Manager)、和本地微(自治)调度(即正文中的单机调度)等多个领域,并在每一个细分领域致力于打造超越业界主流的差异化能力。
5041 1
面向大数据与云计算调度挑战的阿里经济体核心调度系统—Fuxi 2.0全揭秘

相关产品

  • 云原生大数据计算服务 MaxCompute