大数据&AI产品月刊【2023年4月】

简介: 大数据&AI产品技术月刊(2023年4月),涵盖本月技术速递、产品和功能发布、市场和客户应用实践等内容,帮助您快速了解阿里云大数据&AI方面最新动态。

一、产品功能发布

【云原生大数据计算服务 MaxCompute 】新版本/新规格 - 新人特惠规格发布

MaxCompute在阿里云免费试用中心推出新人特惠规格,提供一定的计算和存储免费额度方便新客进行产品核心能力体验。


【云原生大数据计算服务 MaxCompute 】新功能 - 新版作业运维发布    

新版作业运维将提供全量MaxCompute作业运行列表进行运维管理,同时满足查看作业快照信息和作业当前信息。


【云原生大数据计算服务 MaxCompute 】新功能 - 推出向量计算引擎Proxima CE    

Proxima CE是超大规模离线向量检索引擎,用于支持批量离线向量检索任务,包括基础的向量检索、多类目检索及百万TopK检索等。


【云原生大数据计算服务 MaxCompute 】新功能 - 物化视图加速    

物化视图加速可以自动推荐创建物化视图SQL脚本,方便用户快速创建物化视图,减少重复计算,减少计算资源。


【云原生大数据计算服务 MaxCompute 】新功能 - 支持External Volume非结构化数据存储能力    

External Volume是MaxCompute提供的非结构化大数据存储方案,是OSS路径在数仓中的映射和管理对象

【云原生大数据计算服务 MaxCompute 】新功能 - 支持使用Spark和MapReduce任务处理External Volume中的非结构化数据    

MaxCompute支持使用Spark和MapReduce任务在仓内处理基于OSS的External Volume中的非结构化数据。


【大数据开发治理平台 DataWorks 】新功能 - 数据治理中心新增存储长生命周期治理项    

存储长生命周期治理项可帮助用户对于MaxCompute分区表合理设置生命周期,减少存储资源的浪费。


【大数据开发治理平台 DataWorks 】新功能 - 数据治理中心支持治理问题消息通知    

管理员及个人用户可以将治理工作台中每日治理待解决的问题以消息通知的形式,通过系统提示、邮件、钉钉群、Webhook等方式发送。


【大数据开发治理平台 DataWorks 】新功能 - 数据服务加速服务开始商业化    

加速服务面向MaxCompute数据源生成在线API服务,无需导出MaxCompute数据,即可提供良好的查询性能与效率。


【实时数仓 Hologres 】新版本/新规格 - 开发者体验版本发布    

欢迎新客户免费体验Hologres产品能力。


【检索分析服务 Elasticsearch版】新功能 - Elasticsearch Serverless支持自建Grafana可视化    

支持自建Grafana 对接Elasticsearch Serverless,实现指标数据灵活查询分析与可视化。


【开源大数据平台 E-MapReduce 】新功能 - Serverless StarRocks免费公测版发布

EMR Serverless StarRocks公测版面向所有用户开放,可以直接通过控制台创建入门版实例,进行免费测试。


【开源大数据平台 E-MapReduce 】新功能 - 支持控制台可视化管理YARN分区    

EMR支持在控制台上通过可视化UI管理YARN分区,同时可以批量建立节点组与分区的映射,方便操作。


【实时计算 Flink版】新功能 - Flink引擎VVR 6.0.6版本发布以及平台改版、连接器更新、性能优化    

发布Flink全托管的新版本,包含平台改版和引擎更新、连接器更新、性能优化以及缺陷修复。


【机器学习 PAI 】新功能 - EAS重磅发布GU系列异构GPU资源规格    

PAI推出全新的General Unit(简称GU)系列规格,与PAI传统的实例规格相比,同等性能的实例规格价格优惠近45%。


【机器学习 PAI 】新功能 - EAS全新快捷服务部署控制台上线    

EAS全新快捷部署控制台上线,一键部署AI服务或应用,降低部署门槛。


【机器学习 PAI 】新功能 - EAS发布弹性资源池功能    

EAS发布弹性资源池功能,保证服务扩容时,不受专属资源组机器资源的限制。


【智能开放搜索 OpenSearch 】新功能 - 图片转向量、数据压缩、公网访问功能发布    

智能开放搜索OpenSearch向量检索版推出图片转向量、数据压缩、公网访问功能,为用户提供更便捷的向量搜索服务,降低使用成本。

二、产品快讯

阿里云大数据计算&机器学习产品免费试用上线!    

阿里云大数据计算&机器学习推出免费试用活动,其中包含Maxcompute、Hologres、实时计算Flink版、机器学习PAI等多款热门产品,点击了解详细试用规则,一键参与试用。


AI推理服务平台升级,阿里云机器学习PAI推出新规格    

近日,阿里云机器学习平台PAI宣布全面升级模型服务平台PAI-EAS,面向文图生成、大语言模型等各类模型提供弹性稳定的推理服务,并推出全新规格GU30。新推出的PAI-EAS GU30系列规格,专用于深度学习异构推理场景,较PAI-EAS同等性能的传统规格价格下降45%。

image.png


阿里云机器学习PAI发布基于HLO的全自动分布式系统TePDist,并宣布开源!    

近日,阿里云机器学习平台PAI正式发布自研的基于HLO的全自动分布式深度学习系统 TePDist。它通过在HLO上做分布式策略搜索,能够与用户模型构建语言解耦。并且在保持通用性的同时,能够在可接受的策略搜索时间内,追求高性能分布式策略,同时用户无需修改模型主体代码,系统能够全自动地帮助用户做分布式扩展,有效解决了分布式框架长期以来在实际生产场景中手工优化和自动分布式工作存在的诸多性能和效率问题。


阿里云EMR Serverless StarRocks公测正式开启!    

阿里云EMR Serverless StarRocks 免费公测已开启,向所有用户开放!您可通过EMR控制台直接创建实例,轻松体验全托管、免运维的服务。 EMR Serverless StarRocks 是由阿里云EMR全新推出的 Serverless StarRocks 服务,StarRocks 是一款高性能分析型数据仓库,使用向量化、MPP架构、可实时更新的列式存储引擎等技术实现多维、实时、高并发的数据分析。可广泛应用于BI报表分析、OLAP报表、数据湖分析、实时数据接入及分析等场景。


阿里云Elasticsearch自研智能存储引擎能力再升级,索引存储大小降低超40%!    

在Elastic中国开发者大会2023上,阿里云首次对外公开Elasticsearch全面Serverless化背后的产品技术架构,阿里云Elasticsearch依靠云原生底座技术升级,持续进行内核优化,并在日志场景大幅提升使用性价比,向用户提供更简单、更稳定、更弹性的搜索云服务。

三、产品学习指南

【产品运维】eBPF动手实践系列一:解构内核源码eBPF样例编译过程    

了解和掌握纯c语言的ebpf编译和使用,有助于加深对于eBPF技术原理的进一步掌握,也有助于开发符合自己业务需求的高性能的ebpf 程序。今天选择基于4.18内核的基于内核源码的原生编译方式做进一步分析。


【产品运维】通过云监控CloudMonitor实时捕获EMR集群的状态变化    

本文演示如何捕获EMR集群状态变更并发送到当前常用的“钉钉”手机客户端,通过结合CloudMonitor以及FC,可以实时捕获EMR集群的生命周期变化,如集群的创建和停止,扩容和缩容以及其他类型的集群状态变更等。


【最佳实践】展心展力metaapp:基于DeepRec的稀疏模型训练实践

metaapp-推荐广告研发部,是比较传统的推广搜组。原先采用的TensorFlow+自研分布式 ps方案,迭代和维护成本都比较高。经过多方考量,采用阿里云机器学习PAI开源的DeepRec,针对稀疏模型在分布式、图优化、算子、Runtime等方面进行了深度的性能优化,并且完全开源,取得了显著的性能提升和成本下降。


【最佳实践】OpenSearch图搜图、文搜图向量检索最佳实践    

本文介绍如何通过OpenSearch【向量检索版】帮助企业在没有向量数据的情况下快速搭建图像搜索服务,解决图片向量化、向量搜索等检索难题,实现以图搜图、以文搜图等多种图像检索能力。并通过数据压缩功能,降低存储空间,降低业务成本,为企业提供效果、性能双保障。

相关实践学习
基于MaxCompute的热门话题分析
Apsara Clouder大数据专项技能认证配套课程:基于MaxCompute的热门话题分析
相关文章
|
3月前
|
存储 人工智能 安全
拔俗AI临床大数据科研分析平台:让医学研究更智能、更高效
阿里云原生AI临床大数据科研平台,打通异构医疗数据壁垒,实现智能治理、可视化分析与多中心安全协作,助力医院科研提速增效,推动精准医疗发展。
|
3月前
|
人工智能 Cloud Native 算法
拔俗云原生 AI 临床大数据平台:赋能医学科研的开发者实践
AI临床大数据科研平台依托阿里云、腾讯云,打通医疗数据孤岛,提供从数据治理到模型落地的全链路支持。通过联邦学习、弹性算力与安全合规技术,实现跨机构协作与高效训练,助力开发者提升科研效率,推动医学AI创新落地。(238字)
|
3月前
|
传感器 人工智能 监控
拔俗多模态跨尺度大数据AI分析平台:让复杂数据“开口说话”的智能引擎
在数字化时代,多模态跨尺度大数据AI分析平台应运而生,打破数据孤岛,融合图像、文本、视频等多源信息,贯通微观与宏观尺度,实现智能诊断、预测与决策,广泛应用于医疗、制造、金融等领域,推动AI从“看懂”到“会思考”的跃迁。
|
人工智能 大数据 Apache
大数据&AI的16种可能,2020阿里云客户最佳实践合集下载
2020年9月18日下午13:00云栖大会正式发布 《大数据&AI的16种可能,2020阿里云客户最佳实践合集》
73892 4
大数据&AI的16种可能,2020阿里云客户最佳实践合集下载
|
人工智能 大数据 云栖大会
大数据&AI的16种可能,2020阿里云客户最佳实践合集下载
2020年9月18日下午13:00云栖大会正式发布 《大数据&AI的16种可能,2020阿里云客户最佳实践合集》
3645 0
大数据&AI的16种可能,2020阿里云客户最佳实践合集下载
|
3月前
|
消息中间件 人工智能 安全
云原生进化论:加速构建 AI 应用
本文将和大家分享过去一年在支持企业构建 AI 应用过程的一些实践和思考。
776 46
|
4月前
|
人工智能 安全 中间件
阿里云 AI 中间件重磅发布,打通 AI 应用落地“最后一公里”
9 月 26 日,2025 云栖大会 AI 中间件:AI 时代的中间件技术演进与创新实践论坛上,阿里云智能集团资深技术专家林清山发表主题演讲《未来已来:下一代 AI 中间件重磅发布,解锁 AI 应用架构新范式》,重磅发布阿里云 AI 中间件,提供面向分布式多 Agent 架构的基座,包括:AgentScope-Java(兼容 Spring AI Alibaba 生态),AI MQ(基于Apache RocketMQ 的 AI 能力升级),AI 网关 Higress,AI 注册与配置中心 Nacos,以及覆盖模型与算力的 AI 可观测体系。
1048 51
|
3月前
|
人工智能 运维 Kubernetes
Serverless 应用引擎 SAE:为传统应用托底,为 AI 创新加速
在容器技术持续演进与 AI 全面爆发的当下,企业既要稳健托管传统业务,又要高效落地 AI 创新,如何在复杂的基础设施与频繁的版本变化中保持敏捷、稳定与低成本,成了所有技术团队的共同挑战。阿里云 Serverless 应用引擎(SAE)正是为应对这一时代挑战而生的破局者,SAE 以“免运维、强稳定、极致降本”为核心,通过一站式的应用级托管能力,同时支撑传统应用与 AI 应用,让企业把更多精力投入到业务创新。
510 30
|
3月前
|
设计模式 人工智能 自然语言处理
3个月圈粉百万,这个AI应用在海外火了
不知道大家还记不记得,我之前推荐过一个叫 Agnes 的 AI 应用,也是当时在 WAIC 了解到的。
511 1

相关产品

  • 云原生大数据计算服务 MaxCompute