开发者社区> 晋恒> 正文
阿里云
为了无法计算的价值
打开APP
阿里云APP内打开

阿里云 MaxCompute 2020-12 月刊

简介: 2020年12月 MaxCompute 在查询加速、流式数据写入、消费限制、实时作业监控、元数据服务方面有最新发布,欢迎通过本月刊了解12月最新发布详情。
+关注继续查看

【12月新发布功能】

1、MaxCompute 查询编辑器支持查询加速提升数据分析能力

MaxCompute 数据分析支持查询加速,当分析师通过SQL查询数据时,速度可提升至秒级,为数据分析师提供更优的数据分析体验。

适用客户及场景

数据分析师,尤其适用于数据分析师对离线数仓的数据进行取数,再通过Excel进行二次分析的场景。

发布功能

MaxCompute 数据分析查询模式支持 MaxCompute 查询加速,对于中、小数据量查询作业将执行时间从分钟级缩减至秒级。 通过 MaxCompute 查询编辑器发起查询 SQL 会优先通过查询加速进行查询,若满足则秒级返回结果,若不满足查询加速条件,则会回退离线查询,保障查询作业正常执行。

结合查询编辑器丰富的web-excel分析功能,数据分析师可通过MaxCompute数据分析快速的进行一站式数据查询、结果二次分析及结果分享。

MaxCompute查询加速功能当前支持按量计费资源,若您的项目使用包年包月资源,暂时还无法满足查询加速。

查看文档 >>


2、MaxCompute 流式数据写入服务(Streaming Tunnel)公测发布

MaxCompute Streaming Tunnel 服务,支持 API 方式实现流式数据无感知高 QPS 写入 MaxCompute。

适用客户

有实时计算Flink、数据通道DataHub、数据传输服务DTS、消息服务kafka、实时数据同步等场景的企业、机构。

发布功能

流式语义API:全新的API,简化分布式服务开发操作。
自动创建分区:支持分布式服务并发创建分区。
支持数据异步 zorder by 排序功能。

查看文档 >>


3、MaxCompute 按量计费 SQL 支持日累计消费限制

MaxCompute 发布按量计费 SQL 日累计消费限制功能,该功能可以实时监控并阻止按量计费 project 的 SQL 消费超出预算。

适用客户及场景

• 数据开发人员在数据开发过程中,通过开发项目进行数据探查、SQL测试等操作时,容易发起大输入量SQL且不能及时感知的,可通过该功能进行日累计总消费的限制。
• 数据分析师通过SQL查询取数时,容易发起大输入量的查询SQL,此时可单独划分项目给分析师取数,并通过该功能进行日累计总消费限制。

发布功能

MaxCompute 发布按量计费 SQL 日累计消费限制功能,提供对整个 Project 标准 SQL 日累计消费进行限制。

Project 内当日标准 SQL 发生的计量累计消费与正在发起的标准 SQL 预估消费总和大于设定的值,则正发起 SQL 会被限制执行,返回失败状态并给出失败信息,通过该功能阻止标准 SQ L日累计消费超出预算。

在设置前,需要充分评估日常消费量,设置合理值,避免累计消费超过设定值后导致 SQL 作业无法执行而耽误业务产出。如发现设置不合理,Project owner 或拥有 SuperAdministrator 的管理员可以随时进行调整。

查看文档 >>


4、MaxCompute 运行中作业快照 Information_Schema.Tasks 内测发布

Information_Schema.Tasks 视图提供运行中作业的详细信息,支持通过该数据接口进行实时作业监控。

适用客户

需要实时监控作业并优化资源使用的客户

发布功能

以 Information_Schema.Tasks 视图方式,提供当前运行中作业的详细信息,包括作业列表以及各作业 cpu/内存使用大小和资源占比、运行时长等信息。通过该视图,使用人员可以快速定位运行时间较长的慢作业、资源消耗高的大作业,从而有针对性地进行作业优化或资源容量规划。

查看文档 >>


5、MaxCompute 新建 Project 默认提供 Information_Schema 服务(中国区)发布

新建的Project,无需管理员手动安装,默认自动提供 Information_Schema 元数据服务,便于用户查看使用。

优化功能

创建新的 MaxCompute Project,系统将自动提供该 Project 的元数据视图,不需要管理员通过安装 Package 方式获取,Information_Schema 成为 MaxCompute 默认提供的服务内容。


MaxCompute 产品官网 >>
阅读往期月刊 >>

更多关于大数据计算产品技术交流,可扫码加入 “MaxCompute开发者社区” 钉钉群

image

版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。

相关文章
MaxCompute Tunnel 日常工作使用讲解|阿里云产品内容精选(四十六)
MaxCompute是面向分析的企业级SaaS模式云数据仓库,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。
241 0
MaxCompute日常工作及实践扩展|阿里云产品内容精选(三十二)
本文内容取自开发者社区阿里巴巴大数据计算技术圈,为大家提供相关技术思考。
98 0
企业级 SaaS 模式云数据仓库MaxCompute实战案例|阿里云产品内容精选(二十八)
本文给大家推荐一下关于MaxCompute的实战案例及相关探索。
168 0
SaaS模式云数据仓库Maxcompute使用指南|阿里云产品内容精选(十八)
本文主要推荐阿里云大数据计算服务MaxCompute使用指南。
163 0
[大数据新手上路]“零基础”系列课程--如何将ECS上的Hadoop数据迁移到阿里云数加·MaxCompute
 想用阿里云数加·大数据计算服务(MaxCompute),但是现在数据还在hadoop上,怎么办?   别烦恼,跟着我们走,来一次MaxCompute零基础数据迁移之旅~Let’s Go!
15220 0
《阿里云周刊》第5期 MaxCompute 2.0重磅发布!
阿里云周刊 Alibaba Cloud Weekly News 第4期 汇聚阿里云一周最新动态,为您了解阿里云相关产品、发展并参与相关活动提供参考。
4915 0
一分钟了解阿里云产品:大数据计算服务MaxCompute概述
  阿里云发布了许多产品,今天让我们来了解下大数据计算服务MaxCompute这款产品吧。     什么是MaxCompute呢?   MaxCompute是由阿里云自主研发,是阿里巴巴自主研发的海量数据处理平台。提供针对TB/PB级数据、实时性要
17489 0
一分钟了解阿里云产品:使用阿里云MaxCompute之点滴
这次做网聚宝搜索服务化这个项目,体验了一下阿里云的重量级云产品MaxCompute。MaxCompute在网聚宝搜索上云这个项目中起到了非常至关重要的作用,一句话总结:MaxCompute是非常靠谱的。在此将之前碰到问题点做一下总结,希望对有和我们一样需求的团队或者个人有所帮助。     那么
3702 0
+关注
晋恒
大数据计算服务MaxCompute产品运营
文章
问答
文章排行榜
最热
最新
相关电子书
更多
阿里云MaxCompute百问百答
立即下载
《阿里云MaxCompute & 帆软企业级BI分析》
立即下载
2019大数据技术公开课第五季—Hive迁移到MaxCompute最佳实践
立即下载