ODPS重磅升级!全面支撑AI应用爆发

本文涉及的产品
云原生大数据计算服务MaxCompute,500CU*H 100GB 3个月
简介: 阿里云全面升级自研大数据平台ODPS架构,旗下MaxCompute、Hologres和DataWorks等核心产品全面融合AI技术,提升数据处理能力与多模态计算支持,推动企业智能化转型。

近日,阿里云宣布全面升级自研大数据平台ODPS架构,旗下MaxCompute、Hologres和DataWorks等核心产品将全面拥抱AI,推动大数据与AI的深度融合。

ODPS是阿里云首款产品,过去十五年,ODPS不仅支撑了阿里巴巴集团内部电商、金融、物流等核心业务的数据处理需求,还帮助数万家国内外企业实现了从线下IDC到云原生的平滑过渡。今天,ODPS正式迈入AI Native时代,进化成为AI而生的数据平台。

为AI而生:ODPS的四大核心升级

超大规模数据处理能力,支撑AI算力爆发

在AI时代,大模型训练需要处理海量数据,对算力提出了极高要求。ODPS通过云原生架构,实现了数十万台集群的弹性调度,峰值数据处理能力达50亿次/秒。以通义千问训练任务为例,ODPS的即开即用、按量付费模式节省了90%以上的成本。

多模态数据存储与计算,打破AI数据边界

随着AI时代的到来,数据逐渐呈现多元化,包含文本、图片、视频等多种类型,非结构化数据占比超过80%。ODPS推出湖仓一体方案,支持全模态数据的统一存储。

在计算方面,ODPS-MaxCompute推出面向 Python开发生态的分布式计算框架MaxFrame,统一Python编程接口,提供高效的分布式计算能力,部分算子相比用户本地自建性能提升3倍以上,计算、运维成本降低50%。

面向多模态检索场景,ODPS-Hologres在高性能实时数据分析的基础上,与Deepseek/通义等大模型结合构建企业级RAG知识库,减少大模型问答幻觉,提升知识更新与问答速度,性能领先开源30%-40%。

近实时计算实现极致性价比

ODPS通过增量计算引擎(DLMV)和近线查询(MaxQA),填补了实时与离线之间的空缺。增全量一体的计算能够极大地优化整体计算资源,并且提供一个更稳定的环境、更强大的计算能力。

MaxQA引擎通过在实现近实时场景下的查询性能优化,能够在独享的查询计算资源池中,对管控链路、查询优化器、执行引擎、存储引擎及缓存机制等多个环节进行全面优化,显著减少响应时间,提升数据效率。

同时,Flink Uniflow也发布了流/批/近线的一体化数据方案,帮助用户实现秒级、分钟级甚至小时级的计算范式迁移。

AI赋能数据价值变现:数据无应用不价值

AI让数据价值从“人分析数据”到“AI直接变现业务价值”。

  • MaxCompute Notebook通过结合MaxFrame分布式计算框架,支持通过SQL与Python相结合,轻松访问MaxCompute中海量数据,进行Data+ AI一体化数据分析、数据科学计算、AI模型数据处理。

  • ODPS-DataWorks Copilot智能助手提供SQL/Python代码自动生成和智能补全等服务,数据开发分析平均提效30%。

  • ODPS-Hologres 及DataWorks发布MCP Server服务,为客户提供基于自然语言的用户交互界面及智能化产品体验。

阿里云ODPS与数据湖构建(DLF、Paimon)、E-MapReduce(Serverless StarRocks/Serverless Spark)、实时计算Flink版等产品,共同构成了一个覆盖离线、实时、数据湖等多种场景的大数据解决方案矩阵。这些工具和方案根据不同的企业需求彼此组合,共同构成了AI时代企业数据基础设施坚实底座,帮助企业解决特定数据难题。

目前,ODPS已拥有数十万台集群规模,具备数EB级数据处理能力,是国内最大的数据处理平台,过去15年,ODPS已服务国家电网、小红书、极氪、天弘基金、GoTo等国内外数万家企业。


来源  |  阿里云公众号


相关实践学习
基于Hologres轻松玩转一站式实时仓库
本场景介绍如何利用阿里云MaxCompute、实时计算Flink和交互式分析服务Hologres开发离线、实时数据融合分析的数据大屏应用。
基于MaxCompute的热门话题分析
Apsara Clouder大数据专项技能认证配套课程:基于MaxCompute的热门话题分析
目录
相关文章
|
27天前
|
数据采集 人工智能 分布式计算
ODPS在AI时代的发展战略与技术演进分析报告
ODPS(现MaxCompute)历经十五年发展,从分布式计算平台演进为AI时代的数据基础设施,以超大规模处理、多模态融合与Data+AI协同为核心竞争力,支撑大模型训练与实时分析等前沿场景,助力企业实现数据驱动与智能化转型。
121 4
|
29天前
|
存储 人工智能 NoSQL
阿里云表格存储 Tablestore 全面升级 AI 能力,存储成本直降 30%
近日,阿里云表格存储 Tablestore 宣布全面升级 AI 场景支持能力,正式推出 AI Agent 记忆存储功能,在保障高性能与高可用的同时,整体存储成本降低 30%,标志着 Tablestore 在构建 AI 数据处理和存储的技术内核能力上,迈出关键一步。
179 5
|
人工智能 缓存 NoSQL
【深度】企业 AI 落地实践(四):如何构建端到端的 AI 应用观测体系
本文探讨了AI应用在实际落地过程中面临的三大核心问题:如何高效使用AI模型、控制成本以及保障输出质量。文章详细分析了AI应用的典型架构,并提出通过全栈可观测体系实现从用户端到模型推理层的端到端监控与诊断。结合阿里云的实践经验,介绍了基于OpenTelemetry的Trace全链路追踪、关键性能指标(如TTFT、TPOT)采集、模型质量评估与MCP工具调用观测等技术手段,帮助企业在生产环境中实现AI应用的稳定、高效运行。同时,针对Dify等低代码平台的应用部署与优化提供了具体建议,助力企业构建可扩展、可观测的AI应用体系。
|
1月前
|
机器学习/深度学习 人工智能 PyTorch
GPT为定制AI应用工程师转型第一周学习计划
本计划帮助开发者快速入门AI领域,首周涵盖AI基础理论、Python编程及PyTorch实战。前两天学习机器学习、深度学习与Transformer核心概念,掌握LLM工作原理。第三至四天快速掌握Python语法与Jupyter使用,完成基础编程任务。第五至七天学习PyTorch,动手训练MNIST手写识别模型,理解Tensor操作与神经网络构建。
116 0
|
2月前
|
人工智能 监控 数据可视化
BISHENG下一代企业AI应用的“全能型“LLM软件
杭州奥零数据科技有限公司成立于2023年,专注于数据中台业务,维护开源项目AllData并提供商业版解决方案。AllData提供数据集成、存储、开发、治理及BI展示等一站式服务,支持AI大模型应用,助力企业高效利用数据价值。
|
26天前
|
人工智能 开发者
OpenVINO™ DevCon中国系列工作坊:AI模型优化与端侧应用落地
解锁AI高效部署新路径,共赴智能创新璀璨未来
62 1
|
1月前
|
存储 人工智能 机器人
别再只做聊天机器人:AI 应用商业闭环的工程落地指南,免费体验中
本文介绍了如何通过阿里云百炼平台创建一个星座运势分析AI智能体,并集成支付宝MCP服务实现支付闭环。解决AI产品无法直接变现的问题,完成“服务-支付-交易”全流程闭环,帮助开发者快速实现商业化。
|
1月前
|
存储 人工智能 Serverless
AI Agent 运行时相比传统应用有什么不同:百家企业 AI 实践观察(二)
本文深入探讨了AI Agent运行时的核心挑战及解决方案,分析了AI Agent从理论走向实践过程中所面临的动态推理、资源成本与安全风险等问题,并详细介绍了阿里云函数计算FC如何作为AI Agent运行时及沙箱环境(Sandbox),有效应对脉冲式计算需求、突发性负载、数据隔离与会话亲和性等挑战。同时,文章结合典型场景,展示了函数计算FC在编码式与流程式AI Agent构建中的优势,涵盖Chat AI Agent、营销素材组装、仿真训练等应用,为AI Agent的高效、安全运行提供了完整的技术路径。
214 2
|
2月前
|
机器学习/深度学习 人工智能 自动驾驶
AI Agent多模态融合策略研究与实证应用
本文从多模态信息融合的理论基础出发,构建了一个结合图像与文本的AI Agent模型,并通过PyTorch代码实现了完整的图文问答流程。未来,多模态智能体将在医疗、自动驾驶、虚拟助手等领域展现巨大潜力。模型优化的核心是提升不同模态的协同理解与推理能力,从而打造真正“理解世界”的AI Agent。
AI Agent多模态融合策略研究与实证应用

热门文章

最新文章