阿里云 MaxCompute 2022-1月2月刊合集

本刊为您带来 2022年1月和2月 MaxCompute 产品最新动态。

导读

• 1、2月产品发布最新动态
• 1、2月精选文章推荐

1、2月产品发布最新动态

1. MaxCompute支持表结构变更邀测版本发布  查看文档  >>

适用客户

适用于因业务变更导致MaxCompute中的表结构需要发生变化的客户,特别是需要经常增加、删除字段以及对字段在表中的位置有要求的客户。

发布功能

MaxCompute支持表结构变更功能，包括表新增struct类型字段，表删除现有字段以及表字段顺序变更三种功能，可以满足客户因业务变更导致数据计算逻辑或存储内容发生变更的场景。目前三个功能在邀测阶段，您可通过提交工单来申请试用。

2. MaxCompute 湖仓一体功能在新加坡区域商业化发布  查看文档  >>

MaxCompute 湖仓一体方案融合数据湖的灵活性、生态丰富性与数据仓库的企业级能力，构建数据湖和数据仓库融合的数据管理平台。

适用客户

有以下诉求的企业中的 CTO、数据平台架构师、大数据部门主管、数据开发人员等

• 已经基于 Hadoop 集群搭建数据平台，同时对集群资源弹性有需求，希望利用 MaxCompute 的弹性与大规模机器学习能力，快速迭代创新业务
• 企业有多个 Hadoop 集群，需要各个集群之间数据打通，利用 DataWorks / Dataphin 构建企业数据中台
• 以阿里云 OSS 构建数据湖应用，希望借助云数仓实现数据统一分析和管理

发布功能

MaxCompute 湖仓一体方案通过数据仓库 MaxCompute、数据湖（对象存储 OSS 或 Hadoop HDFS）共同实现。

本次发布两种构建湖仓一体的方式：

1. 与阿里云 OSS + DLF 构建湖仓一体能力：通过 MaxCompute 和 OSS 实现。该方式需要配套使用阿里云产品数据湖构建 DLF（Data Lake Formation）。数据湖的元数据（Schema）全部位于DLF中。MaxCompute可以利用DLF对湖数据的元数据管理能力，提升对OSS半结构化格式（AVRO、CSV、JSON、PARQUET、ORC）数据的处理能力。
2. 与 Hadoop HDFS 构建湖仓一体能力：通过MaxCompute和Hadoop HDFS（包括本地机房搭建、基于云上虚拟机搭建以及阿里云 E-MapReduce等）实现。支持向导式开通MaxCompute到VPC中Hadoop Hive 和数据湖构建DLF + OSS 的连接

3.MaxCompute 管控台支持外部数据源管理  查看文档  >>

适用客户

希望通过 MaxCompute 打通位于 VPC 网络中的基于 Hadoop 集群搭建数据平台，利用 MaxCompute 的弹性与大规模机器学习能力。

发布功能

MaxCompute 支持通过创建外部数据源对象连接 Hadoop 集群，打通 MaxCompute 与 Hadoop 数据平台。在 MaxCompute 管控台中，针对外部数据源进行创建、测试连通性、删除等管理操作。

4.MaxCompute Hadoop/DLF+OSS 外部项目元数据在DataWorks数据地图透出  查看文档  >>

适用客户

希望利用 DataWorks 数据地图功能对 MaxCompute 项目、外部项目做统一数据资产视图的客户。

发布功能

MaxCompute Hadoop/DLF+OSS 外部项目元数据在DataWorks数据地图透出。

5.MaxCompute Logview新增数据安全管理功能  查看文档  >>

适用客户

使用MaxCompute的开发者和管理者

发布功能

通过MaxCompute 项目级别参数“odps.forbid.fetch.result.by.bearertoken”，可以控制是否禁止Logview的Result页签显示作业运行结果，True则禁止显示作业运行结果，False则允许显示作业运行结果。该参数主要用于进一步增强数据安全防护。

6.云原生一体化数仓重磅发布

云原生一体化数仓是集阿里云大数据产品MaxCompute、DataWorks、Hologres三种产品能力于一体的一站式大数据处理平台。通过离线实时一体、分析服务一体、湖仓一体和数据综合治理架构实现成本更低、速度更快、性能更好、运维更简单。

观看发布会 >>

了解详情 >>

1、2月精选文章推荐

一文读懂云原生一体化数仓 >>

云原生离线实时一体化数仓建设与实践 >>

MaxCompute湖仓一体介绍 >>

独家下载《阿里云MaxCompute百问百答》 解锁SaaS模式云数据仓库 >>