大数据&AI产品月刊【2022年6月】

简介: 大数据&AI产品技术月刊(2022年6月),涵盖本月技术速递、产品和功能发布、市场和客户应用实践等内容,帮助您快速了解阿里云大数据&AI方面最新动态。

一、本月产品功能发布

【云原生大数据计算服务 MaxCompute 】新功能 - 查询加速(MCQA)包年包月产品规格支持发布

MaxCompute支持配制交互式资源用于查询加速优化,将执行时间为分钟级的查询作业缩减至秒级,且兼容原查询功能。


【云原生大数据计算服务 MaxCompute 】新功能 - 包年包月Quota支持单作业CU并发上限

使用MaxCompute包年包月Quota时支持设置单作业CU并发上限,防止出现单作业长时间占用大量CU导致其他作业一直等待资源。


【云原生大数据计算服务 MaxCompute 】新功能 - 包年包月支持独占Quota

MaxCompute包年包月独占Quota,可以保障本Quota 资源临时空闲时不会被抢占,以便随时都可供本Quota作业占用。


【大数据开发治理平台 DataWorks 】新功能 - 智能数据建模支持自动生成数据ETL框架代码

加深数据建模与数据开发的融合,根据用户在维度建模中自动生成模型生成数据的ETL框架代码。


【大数据开发治理平台 DataWorks 】新功能 - 智能数据建模支持主键和非空字段自动生成数据质量规则

智能数据建模产品中自动生成主键和非空字段的数据质量规则,以进一步确保线上数据产出符合模型设计要求。


【大数据开发治理平台 DataWorks 】新功能 - 数据治理中心新增MaxCompute资源数据

成本治理能力增强,新增各类MaxCompute资源整体消耗统计、任务数量统计等数据。


【大数据开发治理平台 DataWorks 】新功能 - 数据地图支持数据指标信息展示和检索

数据指标中创建的派生指标信息,可以直接在数据地图中的表搜索与表详情展示,方便用户更加快速找到对应数据或指标,提升数据指标的使用率。


【大数据开发治理平台 DataWorks 】新功能 - 数据服务支持从函数视角查看关联API

数据服务提升对函数的管理能力,数据服务新增从函数视角查看关联API列表的能力,在函数发布、删除等重要操作前能够辅助查看其下游依赖。


【实时数仓 Hologres 】新地域/可用区 - 共享集群(MaxCompute BI加速版)开通新加坡地区

共享集群(MaxCompute BI加速版) 是通过共享集群资源的形式,基于Hologres存储计算分离的云原生架构,针对MaxCompute交互式分析场景设计的在线查询加速服务。该服务适合多类用户场景,如:1)查询MaxCompute数据的频率低,且要求查询时延较低;2)需要使用复杂查询来查询大量MaxCompute数据;3)需要加速查询MaxCompute数据并对接BI分析等。


【检索分析服务 Elasticsearch 版】新地域/可用区 - 华北6(乌兰察布)地域开服|支持7.10及7.16版本

阿里云Elasticsearch新增华北6(乌兰察布)地域,支持7.10及7.16版本,创建实例最快5min,可以在控制台上按需求开通集群。


【检索分析服务 Elasticsearch 版 】体验优化 - 变更能力升级与记录功能可视化

可视化查看Elasticsearch集群变更过程中详细进展及耗时时间,及时发现变更潜在问题。


【开源大数据平台 E-MapReduce 】新功能 - 数据湖集群上线

E-MapReduce新版控制台为客户提供了更灵活、可靠、高效的数据湖集群服务,客户可以基于该集群轻松构建一个可扩展的数据管道。


【实时计算 Flink 版】新功能 - 新增支持Kafka Catalog

Kafka Catalog支持自动解析Kafka消息推导表信息,可以直接访问Kafka集群中的Topic。


【实时计算 Flink 版】新功能 - CDAS新增分库同步能力

支持使用正则表达式定义库名,匹配数据源的多个分库下的源表。


【实时计算 Flink 版】新功能 - Hologres Connector支持全增量一体源表消费

Hologres源表支持首先全量同步,平滑切换至增量同步消费Binlog的模式,帮助您高效便捷完成数据迁移与同步。


【实时计算 Flink 版】新功能 - Redis结果表支持Key TTL

Redis中的数据往往需要设置过期时间,支持在写入Redis结果表的同时设置Key级别的TTL。


【实时计算 Flink 版】新功能 - MaxCompute Connector支持Stream Tunnel

以及支持Stream Tunnel和Batch Tunnel的数据压缩。


【实时计算 Flink 版】新功能 - Hologres Connector支持Datastream API

支持Datastream形式的Hologres Connector。


【实时计算 Flink 版】新功能 - Elasticsearch Connector支持retry_on_confilict参数

在对Elasticsearch更新操作中,允许设置因版本冲突异常而重试的最大次数。


【机器学习 PAI 】新地域/可用区 - Designer 在香港正式开服

PAI-Designer在香港正式开服,提供上百种PAI自研机器学习算法和几十个行业模板,可以在PAI控制台上按需使用。


【智能推荐 AIRec 】新功能 - 合规推荐、快速体验与数据智能诊断功能

可根据用户打开/关闭个性化推荐服务,使用行业demo快速启动与体验产品功能,智能诊断数据、算法的可用性,提升数据质量与用户体验。


【智能开放搜索 OpenSearch 】新版本/新规格 - 问天引擎正式发布

问天引擎是阿里巴巴集团内部广泛使用的大规模分布式检索系统,为用户提供高性能、低成本、易用的PaaS智能搜索服务。


【智能开放搜索 OpenSearch 】新功能 - 查询语义理解——定制词权重模型发布

智能开放搜索推出定制召回模型-定制词权重功能,基于预训练行业NLP模型和业务数据,定制专属词权重,智能化提升语义分析、搜索效果。


二、产品快讯

阿里灵杰公众号正式上线

“阿里灵杰”公众号是大数据+AI内容输出的核心出口,内容包括高质量案例和实践、前沿技术趋势、学术开源、深度技术解读等多项内容,欢迎大家关注。


再突破!阿里云进入Gartner云AI开发者服务挑战者象限

近日,国际权威研究机构Gartner发布2022年《云AI开发者服务魔力象限》。凭借达摩院领先的AI算法和阿里云丰富的产品体系,继2021年入围远见者象限之后,阿里云进一步跃升至挑战者象限,且成为报告中执行能力最强的中国企业。


IDC:阿里云获2021中国数据治理平台市场份额第一

近日,领先的IT市场研究和咨询公司IDC发布《中国数据治理市场份额,2021:广泛落地,持续增长》报告,报告统计显示2021年中国数据治理平台市场规模达 23.9 亿元。阿里云以23.4%份额获得2021中国数据治理平台市场份额第一。

image.png


国内首批!阿里云云原生数据湖产品通过信通院评测认证

近日,中国信息通信研究院 (以下简称“信通院”) 正式公布了第十四批“大数据产品能力评测”结果,阿里云云原生数据湖产品,包括云原生开源大数据平台 E-MapReduce、数据湖构建 DLF(Data Lake Formation)、对象存储 OSS 以及 DataWorks等产品。整个产品体系提供“统一元数据管理、数据入湖、数据存储、缓存加速、弹性计算、容器、数据分析、任务编排、运维管理,以及安全”等全面数据湖能力。通过了工业和信息化部中国信息通信研究院大数据能力专项评测,荣获“云原生数据湖基础能力专项评测证书”


SREWorks v1.2 版本发布 | 新增运维市场能力

SREWorks v1.2 版本发布,在v1.1版本发布之后,SREWorks团队开始了常态化的功能版本迭代,v1.1提供了组件插拔能力,v1.2更进一步,发布了规划已久的运维市场 ,助力团队构筑运维生态,也发布了诸多企业用户关注的纯内网源码构建方案。


小迈科技 X Hologres:高可用的百亿级广告实时数仓建设

小迈科技通过引入Hologres+Flink+MaxCompute搭建的流批一体实时数仓平台,支撑了多个应用场场景,包括监控大盘,DMP人群等智能投放,财务分析等。为小迈科技带来了显著的业务收益。


三、产品学习指南

【产品运维】Flink CDC + OceanBase 全增量一体化数据集成方案

通过对Flink CDC OceanBase Connector 实现原理,以及Flink CDC + OceanBase 4种应用场景讲解,来介绍Flink CDC + OceanBase 全增量一体化数据集成方案。


【最佳实践】EasyNLP带你玩转CLIP图文检索

本文简要介绍CLIP的技术解读,以及如何在EasyNLP框架中玩转CLIP模型。


【最佳实践】DataFunTalk:阿里建设一站式实时数仓的经验分享

本文主要为大家介绍阿里巴巴基于一站式实时数仓Hologres建设实时数仓的经验和解决方案。


【最佳实践】:Hologres锁介绍以及排查锁

本文介绍Hologres中的锁机制,以提升事务的隔离性。同时介绍了如何排查锁,减少sql卡住的情况。


相关实践学习
简单用户画像分析
本场景主要介绍基于海量日志数据进行简单用户画像分析为背景,如何通过使用DataWorks完成数据采集 、加工数据、配置数据质量监控和数据可视化展现等任务。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
相关文章
|
1月前
|
机器学习/深度学习 人工智能 TensorFlow
倚天产品介绍|倚天性能优化—YCL AI计算库在resnet50上的优化
Yitian710 作为平头哥第一代ARM通用芯片,在AI场景与X86相比,软件生态与推理性能都存在一定的短板,本文旨在通过倚天AI计算库的优化,打造适合ARM架构的软件平台,提升倚天性能
|
1月前
|
人工智能 安全 算法
AI与大数据:智慧城市安全的护航者与变革引擎
AI与大数据:智慧城市安全的护航者与变革引擎
23 1
|
1月前
|
机器学习/深度学习 人工智能 语音技术
阿里旗下通义系列AI产品有哪些?
【2月更文挑战第16天】阿里旗下通义系列AI产品有哪些?
370 2
阿里旗下通义系列AI产品有哪些?
|
13天前
|
机器学习/深度学习 人工智能 安全
Azure Databricks实战:在云上轻松进行大数据分析与AI开发
【4月更文挑战第8天】Databricks在大数据分析和AI开发中表现出色,简化流程并提高效率。文中列举了三个应用场景:数据湖分析、实时流处理和AI机器学习,并阐述了Databricks的一体化平台、云原生弹性及企业级安全优势。博主认为,Databricks提升了研发效能,无缝集成Azure生态,并具有持续创新潜力,是应对大数据挑战和加速AI创新的理想工具。
37 0
|
1月前
|
人工智能 JavaScript API
互联网人的福利!『昆仑天工』4款AI产品开源!提供API对接!
互联网人的福利!『昆仑天工』4款AI产品开源!提供API对接!
173 0
|
1月前
|
人工智能 大数据 流计算
大数据&AI产品月刊【2024年2月】
大数据&AI产品技术月刊【2024年2月】,涵盖本月技术速递、产品和功能发布、市场和客户应用实践等内容,帮助您快速了解阿里云大数据&AI方面最新动态。
|
人工智能 大数据 Apache
大数据&AI的16种可能,2020阿里云客户最佳实践合集下载
2020年9月18日下午13:00云栖大会正式发布 《大数据&AI的16种可能,2020阿里云客户最佳实践合集》
71732 1
大数据&AI的16种可能,2020阿里云客户最佳实践合集下载
|
人工智能 大数据 云栖大会
大数据&AI的16种可能,2020阿里云客户最佳实践合集下载
2020年9月18日下午13:00云栖大会正式发布 《大数据&AI的16种可能,2020阿里云客户最佳实践合集》
3451 0
大数据&AI的16种可能,2020阿里云客户最佳实践合集下载
|
机器学习/深度学习 人工智能 自然语言处理
搜狗翻宝Pro机再次开挂,智能翻译硬件成中国人工智能的新风口
第五届世界互联网大会正在如火如荼的举行。
搜狗翻宝Pro机再次开挂,智能翻译硬件成中国人工智能的新风口
|
机器学习/深度学习 人工智能 自然语言处理
与世界同行 2017中国人工智能大会有感
与世界同行 2017中国人工智能大会有感
1543 0
与世界同行 2017中国人工智能大会有感

相关产品

  • 云原生大数据计算服务 MaxCompute