晋恒
2021-01-05
1471浏览量
【12月新发布功能】
1、MaxCompute 查询编辑器支持查询加速提升数据分析能力
MaxCompute 数据分析支持查询加速,当分析师通过SQL查询数据时,速度可提升至秒级,为数据分析师提供更优的数据分析体验。
适用客户及场景
数据分析师,尤其适用于数据分析师对离线数仓的数据进行取数,再通过Excel进行二次分析的场景。
发布功能
MaxCompute 数据分析查询模式支持 MaxCompute 查询加速,对于中、小数据量查询作业将执行时间从分钟级缩减至秒级。 通过 MaxCompute 查询编辑器发起查询 SQL 会优先通过查询加速进行查询,若满足则秒级返回结果,若不满足查询加速条件,则会回退离线查询,保障查询作业正常执行。
结合查询编辑器丰富的web-excel分析功能,数据分析师可通过MaxCompute数据分析快速的进行一站式数据查询、结果二次分析及结果分享。
MaxCompute查询加速功能当前支持按量计费资源,若您的项目使用包年包月资源,暂时还无法满足查询加速。
2、MaxCompute 流式数据写入服务(Streaming Tunnel)公测发布
MaxCompute Streaming Tunnel 服务,支持 API 方式实现流式数据无感知高 QPS 写入 MaxCompute。
适用客户
有实时计算Flink、数据通道DataHub、数据传输服务DTS、消息服务kafka、实时数据同步等场景的企业、机构。
发布功能
流式语义API:全新的API,简化分布式服务开发操作。
自动创建分区:支持分布式服务并发创建分区。
支持数据异步 zorder by 排序功能。
3、MaxCompute 按量计费 SQL 支持日累计消费限制
MaxCompute 发布按量计费 SQL 日累计消费限制功能,该功能可以实时监控并阻止按量计费 project 的 SQL 消费超出预算。
适用客户及场景
发布功能
MaxCompute 发布按量计费 SQL 日累计消费限制功能,提供对整个 Project 标准 SQL 日累计消费进行限制。
Project 内当日标准 SQL 发生的计量累计消费与正在发起的标准 SQL 预估消费总和大于设定的值,则正发起 SQL 会被限制执行,返回失败状态并给出失败信息,通过该功能阻止标准 SQ L日累计消费超出预算。
在设置前,需要充分评估日常消费量,设置合理值,避免累计消费超过设定值后导致 SQL 作业无法执行而耽误业务产出。如发现设置不合理,Project owner 或拥有 SuperAdministrator 的管理员可以随时进行调整。
4、MaxCompute 运行中作业快照 Information_Schema.Tasks 内测发布
Information_Schema.Tasks 视图提供运行中作业的详细信息,支持通过该数据接口进行实时作业监控。
适用客户
需要实时监控作业并优化资源使用的客户
发布功能
以 Information_Schema.Tasks 视图方式,提供当前运行中作业的详细信息,包括作业列表以及各作业 cpu/内存使用大小和资源占比、运行时长等信息。通过该视图,使用人员可以快速定位运行时间较长的慢作业、资源消耗高的大作业,从而有针对性地进行作业优化或资源容量规划。
5、MaxCompute 新建 Project 默认提供 Information_Schema 服务(中国区)发布
新建的Project,无需管理员手动安装,默认自动提供 Information_Schema 元数据服务,便于用户查看使用。
优化功能
创建新的 MaxCompute Project,系统将自动提供该 Project 的元数据视图,不需要管理员通过安装 Package 方式获取,Information_Schema 成为 MaxCompute 默认提供的服务内容。
更多关于大数据计算产品技术交流,可扫码加入 “MaxCompute开发者社区” 钉钉群
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
阿里大数据官方技术圈