阿里云 MaxCompute 2020-8 月刊

简介: MaxCompute商业化发布数据备份恢复和数据科学Mars两项重要功能,同时公测发布MaxCompute查询加速。秒级恢复误删除数据,分布式加速 Python 数据科学栈,自动识别短查询作业并加速处理,满足报表分析、即席查询场景的使用要求尽在8月刊。

【8月新功能发布】

1. MaxCompute 数据备份与恢复功能 中国大陆区域(商业化)发布

MaxCompute备份与恢复功能提供持续备份用户修改/删除历史数据,支持快速恢复,持续保护数据安全。

适用客户
· 对数据保护有强需求客户
· 担心数据误删除的客户
· 担心数据被恶意删除的客户
· 适合广泛的企业级客户。

发布功能
MaxCompute提供数据备份与恢复功能,系统会自动备份数据的历史版本(例如被删除或修改前的数据)并保留一定时间,您可以对保留周期内的数据进行快速恢复,避免因误操作丢失数据。

☆ 备份与恢复功能具备以下特点:
· 默认开启,不需要手动开通 - 该功能不依赖外部存储,系统默认为所有MaxCompute项目开放的数据保留周期为1天,备份和存储免费。
· 自动持续备份 - 系统自动对发生变更的数据进行备份,多次变更时将备份多个数据版本,相比固定周期性的备份策略,可以有效避免因误操作丢失数据。
· 恢复快速,操作简单 - MaxCompute具备先进的元数据和多数据版本管理能力,备份和恢复操作不占用额外的计算资源,您可以通过命令快速恢复不同规模的数据。

查看文档 >>

2. MaxCompute 数据科学Mars 中国大陆区域(商业化)发布

Mars 是基于张量的数据科学加速引擎,能分布式加速 numpy、pandas、scikit-learn 和 Python 函数。

适用客户
· Python 数据分析师
· 数据工程师
· 开发者

发布功能
Mars 能利用并行和分布式技术,加速 Python 数据科学栈,兼容 numpy、pandas 和 scikit-learn接口。新的 Remote API 能轻松并行执行 Python 函数,Mars能轻松与TensorFlow、PyTorch 和 XGBoost 集成。
在 MaxCompute 上使用 Mars,支持简单易用的接口来拉起 Mars 集群,不需关心安装和维护集群,具备开箱即用的环境,如 DataWorks 的 pyodps3 节点,已经包含了 Mars。集群内的 Mars 任务可以直读和直写 MaxCompute 表。Mars 集群一旦创建,后续不再需要通过 MaxCompute 调度,任务可以直接提交到 Mars 集群执行。Mars 对于中小型任务(数据量 T 级别以下),具备优秀的性能表现。

查看文档 >>


3. MaxCompute 查询加速(公测)发布

MaxCompute的MCQA(MaxCompute Query Acceleration)功能可以对中、小型查询作业进行加速优化,将执行时间为分钟级的查询作业缩减至秒级,且兼容原查询功能。

适用客户
· BI工程师/数据分析师,对一份数据进行反复交互式探索;
· 业务系统/数据分析师,进行快速超大规模历史明细数据的访问;
· 数据开发工程师,查询验证和函数调试。

发布功能
MaxCompute的查询加速(MCQA)功能可以使EB级数据仓库服务内提供弹性并发的秒级查询能力,在MaxCompute原先吞吐量优化的基础上,补足对延迟优先场景的支持能力。
查询加速让MaxCompute一个服务同时满足数据准备(ETL)、数据挖掘(机器学习)、数据探索(Ad-hoc)、报表分析等多使用场景需要。通过自动识别短查询作业并加速处理、快速响应查询结果的方式,增强了 MaxCompute SQL的整体处理性能,满足报表分析、即席查询场景的使用要求。

查看文档 >>

【8月精选直播回顾】

2020阿里巴巴大数据技术公开课第四季

| MaxCompute 持续定义SaaS模式云数据仓库— 云数据仓库+BI
| MaxCompute 持续定义SaaS模式云数据仓库 — 云数据仓库+实时分析
| MaxCompute 持续定义SaaS模式云数据仓库 — 云数据仓库+实时搜索
| MaxCompute 持续定义SaaS模式云数据仓库 — 云数据仓库+Severless
| MaxCompute 持续定义SaaS模式云数据仓库 — 云数据仓库+AI
| MaxCompute 持续定义SaaS模式云数据仓库 — 云数据仓库+数据银行


MaxCompute 产品官网 https://www.aliyun.com/product/odps
阅读往期月刊 https://yq.aliyun.com/publication/49
更多关于大数据计算产品技术交流,可扫码加入 “MaxCompute开发者社区” 钉钉群
image.png

相关实践学习
简单用户画像分析
本场景主要介绍基于海量日志数据进行简单用户画像分析为背景,如何通过使用DataWorks完成数据采集 、加工数据、配置数据质量监控和数据可视化展现等任务。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
目录
相关文章
|
存储 分布式计算 运维
阿里云 MaxCompute 2023-1~4 月刊
MaxCompute 发布新人特惠免费试用规格,5000CU*H计算资源和100GB存储,3个月免费用,让您0元体验MaxCompute 强劲的产品力。
1064 0
阿里云 MaxCompute 2023-1~4 月刊
|
存储 SQL 分布式计算
阿里云 MaxCompute 2022-10月11月刊
本刊为您带来 2022年10月、11月 MaxCompute 产品最新动态。
766 0
阿里云 MaxCompute 2022-10月11月刊
|
分布式计算 算法 MaxCompute
阿里云 MaxCompute 2022-8月刊
本刊为您带来 2022年8月 MaxCompute 产品最新动态。
1047 0
阿里云 MaxCompute 2022-8月刊
|
分布式计算 Oracle 数据挖掘
阿里云 MaxCompute 2021-12 月刊
2021年12月,MaxCompute 发布物化视图增强功能和支持渐进式计算。详情请阅读本月刊。
959 0
阿里云 MaxCompute 2021-12 月刊
|
机器学习/深度学习 存储 SQL
阿里云 MaxCompute 2021-9 月刊
MaxCompute 是面向分析的企业级 SaaS 模式云数据仓库,基于MaxCompute与推荐、搜索、机器学习等产品可以构建智能推荐、用户增长等多种常用的解决方案。同时MaxCompute具备大规模数据科学分析、半结构化数据处理能力,也可提供基于Delta lake、Hudi格式的湖仓一体方案 。9月MaxCompute金融云华南1(深圳)节点正式开服。
755 0
阿里云 MaxCompute 2021-9 月刊
|
SQL 机器学习/深度学习 存储
阿里云 MaxCompute 2021-2 月刊
2021年2月,MaxCompute发布云数仓内的机器学习 MaxCompute SQLML功能,以及MaxCompute湖仓一体OSS数据湖集成方案等15项新功能,欢迎阅读产品2月刊了解新发功能详情。
4926 0
阿里云 MaxCompute 2021-2 月刊
|
存储 分布式计算 运维
阿里云 MaxCompute 2021-1 月刊
2021年1月,SaaS模式云数据仓库MaxCompute存储单价由梯度定价统一下调整为月固定单价,中小规模企业数据仓库存储成本最高降四成。
3634 0
阿里云 MaxCompute 2021-1 月刊
|
消息中间件 分布式计算 运维
阿里云 MaxCompute 2020-11 月刊
2020年11月MaxCompute发布支持以RAM角色身份访问使用服务以及支持消息队列Kafka版通过Connector持续导入数据新功能,详情请查看本月刊内容。
5061 0
阿里云 MaxCompute 2020-11 月刊
|
SQL 传感器 分布式计算
阿里云 MaxCompute 2020-9 月刊
MaxCompute改版控制台,优化全托管云数据仓库服务的管理和使用体验;同时作业监控诊断工具Logview功能升级发布,扩展了作业的监控指标,提供作业回放功能以及新增Fuxi Sensor支持查看作业内存及CPU使用。
24061 0
|
分布式计算 资源调度 DataWorks
阿里云 MaxCompute 2020-5 月刊
MaxCompute迁移工具MMA2.0新版本发布,MMA2.0不仅在技术架构上做了重构,在功能上也有重大升级,提升了迁移效率和运行稳定性的同时,在操作体验上也更加自动化和智能化。更多5月产品动态,欢迎阅读MaxCompute5月刊。
668 0
阿里云 MaxCompute 2020-5 月刊

相关产品

  • 云原生大数据计算服务 MaxCompute