2023云栖大会 |云原生数据库,走向Serverless与AI驱动的一站式数据平台

本文涉及的产品
云数据库 RDS SQL Server,基础系列 2核4GB
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
简介: 10月31日,在2023云栖大会上,阿里云副总裁,阿里云数据库产品事业部负责人,ACM、CCF、IEEE会士(Fellow)李飞飞发表《云原生数据库,走向Serverless与AI驱动的一站式数据平台》主题演讲。他表示,AI驱动下的数据平台,正在向一站式、智能化的方向演进。作为AIGC应用的基础设施,以PolarDB、AnalyticDB、Lindorm、RDS为核心的阿里云瑶池数据库现已全面拥抱向量检索能力,并与通义等大模型深度集成,为用户提供智能化的一站式数据管理平台,加速业务数智创新。

10月31日,在2023云栖大会上,阿里云副总裁,阿里云数据库产品事业部负责人,ACM、CCF、IEEE会士(Fellow)李飞飞发表《云原生数据库,走向Serverless与AI驱动的一站式数据平台》主题演讲。他表示,AI驱动下的数据平台,正在向一站式、智能化的方向演进。作为AIGC应用的基础设施,以PolarDB、AnalyticDB、Lindorm、RDS为核心的阿里云瑶池数据库现已全面拥抱向量检索能力,并与通义等大模型深度集成,为用户提供智能化的一站式数据管理平台,加速业务数智创新。

随着云原生+Serverless的不断深入,一站式数据平台将让数据管理开发像“搭积木”一样简单实用,以性价比更高、体验更优的云数据库服务,助推用户业务提效增速。

01

云原生+Serverless,让数据平台像搭积木一样简单好用


在信息管理模型(DIKW)中,人类的认知分为四个层次:数据、信息、知识和智慧,而数据平台所承载的就是其中最核心的部分——数据,并内置算力与模型。如今,数据平台已成为AI时代的算力底座,它能够理解数据内容、理清用户意图、整合数据资源,同时在加速迈向“云原生化、平台化、一体化和智能化”,让算力服务触手可及。

李飞飞介绍道,阿里云瑶池数据库不断深化「云原生+Serverless」应用,旨在让数据平台像“搭积木”一样便捷轻巧,提供秒级弹性、开箱即用免运维等服务。用户可以更专注于核心业务,只需按效果和价值付费。据悉,阿里云瑶池旗下的核心产品均已推出Serverless形态,包括云原生数据库PolarDB、云原生数据仓库AnalyticDB、云原生多模数据库Lindorm、云数据库RDS等,并实现了“弹得更快、更稳、更广、更细”的全面升级:

 弹得更快秒级探测、秒级切换

弹得更稳:全场景覆盖,智能无感秒级弹性

弹得更广:秒级弹升0~3000核

弹得更细:三层解耦独立弹升。对比传统架构,Serverless形态可降低60%成本

此外,通过计算资源的一体化调度与管理、混部资源利用率提升、异构架构一体化适配(X86和ARM)、安全容器增强等技术创新,瑶池数据库竞争力全面升级;其中,核心产品(PolarDB、AnalyticDB、RDS)发布基于倚天ARM的经济版,诠释极致性价比。对比开源自建数据库,经济版价格比自建低30%,同时性能比自建高10%。

02

以PolarDB为核心,一体化加速云上数智创新

为打破数据孤岛,瑶池数据库聚焦客户业务场景,通过多产品一体化体验,为用户提供了全方位的一体化能力,进一步简化开发、管理和运维成本。具体包括HTAP一体化、DB+Cache一体化、DB+存储一体化等三大能力全新升级,实现OLTP、OLAP、NoSQL等多业务场景融合,产品易用性全面升级,切实提升用户使用体验:

1. HTAP:

a) 轻量级HTAP:基于自研IMCI技术,云原生数据库PolarDB 100%兼容MySQL语法,可支持大数据量、毫秒级延迟的数据分析需求。对比传统MySQL行存,性能提升了100倍以上。

b) 云原生一体化HTAP:采用Zero-ETL技术,“PolarDB+AnalyticDB”、“RDS+ClickHouse”之间可实现亚秒级数据同步,提供统一入口的一站式HTAP体验,为用户节省10倍链路同步成本,建仓速度提升高达7倍。

以“PolarDB MySQL版+AnalyticDB for MySQL版”为例,针对多源汇聚分析场景,云原生一体化HTAP提供PolarDB←→AnalyticDB的数据无缝流转能力,无需维护额外数据管道,可降低90%的数据链路成本并减少运维负担。通过高速并行通道,可加速数据初始化性能,大幅降低建仓所需时间,目前该能力已在多家互联网行业客户中落地。

2. “DB+Cache”一体化:实现“PolarDB+Tair”、“RDS+Redis”之间的数据自动同步与融合,在解决缓存数据一致性难题的同时,实现了内存资源统一调度与管理,帮助用户降本增效(最高节省30%成本)、提升体验。

3. “DB+存储”一体化:基于数据库缓存池拓展(Buffer Pool Extension)、Auto PL、冷热分离等技术,将冷热温业务数据分层存储,提升性能,可降低高达90%存储成本。

阿里云瑶池持续推动以PolarDB为代表的云数据库向云原生纵深发展,在本次大会上,李飞飞发布了PolarDB Always On系列3大技术升级:

 Multi-Master三层解耦架构:结合RDMA/CXL支持的三层解耦技术,内存池化,提升CPU内存使用率,内存使用率提升50%。Multi-Master轮动升级:集群轮动升级,升级集群不停机,进一步提升SLA,不可用时间减少50%。

高压缩比数据存储:采用in-Memory行级压缩、Smart SSD 2.0硬件压缩等为代表的软硬件一体化压缩技术,最高可节省80%存储成本。

03

AI驱动,数据平台走向一站式智能化

作为AIGC应用的基础设施,阿里云瑶池数据库在AI领域也在不断进行技术布局与应用探索。通过扩展面向Al的数据管理与服务能力,打造智能化的一站式数据管理平台,让云原生数据库更易用,助力用户抢占商业先机。

会上,瑶池数据库首次推出数据智能助手DMS Data Copilot,其结合了DMS智能数据管理、数据使用能力,让SQL开发、使用和管理更加规范和高效,是用户“看数、管数、用数”不可或缺的智能管家。据介绍,DMS Data Copilot支持30+种数据库类型,可提供NL2SQL(降低SQL编写门槛、提升开发效率)、SQL注释生成、SQL纠错、SQL优化等功能。在耶鲁大学推出的Spider数据集评测中,DMS Copilot的成功率和准确率达到99.5%和78%,比开源模型的正确率高出4%。AIGC和LLM大模型浪潮的崛起,进一步推动了业务和应用对向量数据库的需求。瑶池数据库现已全面拥抱向量检索能力,在PolarDB、RDS、AnalyticDB、Lindorm、Tair等产品中集成向量功能,实现结构化数据、半结构化数据、多模数据、向量数据的一体化处理。


其中,企业级智能数仓AnalyticDB与通义大模型家族深度集成,推出一站式全托管大模型解决方案。通义行业大模型和百炼大模型服务平台采用AnalyticDB作为内置向量检索引擎,为政务、医药、电力、制造、汽车、金融等千行百业提供专属行业解决方案,性能较开源增强了2~5倍,加速AIGC应用落地。云原生多模数据库Lindorm具备多模数据处理能力,是集在线服务、离线分析、向量、Al分析能力于一身的一站式AI数据平台。数据不出库,即可轻松存储和分析海量的半结构化和非结构化数据。

04

云智融合生态共赢,服务千行百业

云数据库生态的良好发展,离不开合作伙伴的支持与协同和多元开放的生态体系。会上,阿里云宣布与SelectDB、MongoDBClickhouse分别达成战略合作,双方将发挥各自的技术优势和平台能力,在产品生态融合、联合解决方案等多个领域展开深度合作,推进技术合作和生态协同,构建合作共赢的生态体系。作为国内首个MongoDB云服务商战略合作伙伴和唯一可提供最新版本MongoDB服务的中国云厂商,阿里云的云数据库MongoDB版3年营收实现8倍增长。未来,MongoDB与阿里云的战略合作还将持续深入,积极布局汽车、金融、物流、制造等领域的数据库建设,帮助更多企业实现数据创新和业务增长,携手开启创新下一站。阿里云已与开源分析型数据库ClickHouse达成国内独家战略合作。作为ClickHouse在中国独家的云服务提供商,阿里云拥有世界上最大的ClickHouse商用集群之一,可提供具备独有企业能力的云原生ClickHouse企业版。企业版为存算分离架构,秒级弹性,按量计费,比开源自建成本降低30%+。此外,阿里云瑶池与飞轮科技达成战略合作,业界首发企业版全托管产品——云数据库 SelectDB 版。SelectDB是飞轮科技基于Apache Doris内核打造、聚焦于企业大数据实时分析需求的新一代实时数据仓库。SelectDB 100%兼容Apache Doris,支持大规模实时数据上的极速查询分析。阿里云SelectDB现已全面公测,用户可以在阿里云上便捷地使用SelectDB数仓服务,以满足海量数据极速实时、融合统一、简单易用的分析处理需求。

目前,阿里云瑶池数据库已在千行百业的核心业务中落地应用,服务于自然人税收管理系统、全国60%的省级医保信息平台、广东移动、友邦保险、南方基金、上海市新能源汽车数据平台、掌阅科技、莉莉丝游戏、识货APP等金融、政务、电信、互联网等多领域的客户。

相关实践学习
AnalyticDB MySQL海量数据秒级分析体验
快速上手AnalyticDB MySQL,玩转SQL开发等功能!本教程介绍如何在AnalyticDB MySQL中,一键加载内置数据集,并基于自动生成的查询脚本,运行复杂查询语句,秒级生成查询结果。
阿里云云原生数据仓库AnalyticDB MySQL版 使用教程
云原生数据仓库AnalyticDB MySQL版是一种支持高并发低延时查询的新一代云原生数据仓库,高度兼容MySQL协议以及SQL:92、SQL:99、SQL:2003标准,可以对海量数据进行即时的多维分析透视和业务探索,快速构建企业云上数据仓库。 了解产品 https://www.aliyun.com/product/ApsaraDB/ads
相关文章
|
27天前
|
人工智能 运维 大数据
体验记录——触手可及,函数计算玩转 AI 大模型
阿里云推出的“触手可及,函数计算玩转 AI 大模型”解决方案,通过按量付费、卓越弹性和快速交付能力,为企业提供了便捷的AI大模型部署途径。评测报告详细分析了该方案的实践原理、部署过程及优势,展示了其在高并发场景下的高效性和成本优势,并提出了改进建议。
32 0
|
9天前
|
人工智能 弹性计算 Serverless
触手可及,函数计算玩转 AI 大模型 | 简单几步,轻松实现AI绘图
本文介绍了零售业中“人—货—场”三要素的变化,指出传统营销方式已难以吸引消费者。现代消费者更注重个性化体验,因此需要提供超出预期的内容。文章还介绍了阿里云基于函数计算的AI大模型,特别是Stable Diffusion WebUI,帮助非专业人士轻松制作高质量的促销海报。通过详细的部署步骤和实践经验,展示了该方案在实际生产环境中的应用价值。
40 6
触手可及,函数计算玩转 AI 大模型 | 简单几步,轻松实现AI绘图
|
16天前
|
人工智能 运维 关系型数据库
云栖大会|数据库与AI全面融合,迈入数据智能新纪元
2024年云栖大会「数据库与AI融合」专场,来自NVIDIA、宇视科技、合思信息、杭州光云科技、MiniMax等企业的代表与阿里云瑶池数据库团队,共同分享了Data+AI全面融合的最新技术进展。阿里云发布了DMS的跨云统一开放元数据OneMeta和智能开发OneOps,推出《云数据库运维》技术图书,并介绍了PolarDB、AnalyticDB、Lindorm和Tair等产品的最新能力,展示了AI在数据库领域的广泛应用和创新。
|
30天前
|
人工智能 弹性计算 运维
触手可及,函数计算玩转 AI 大模型
《触手可及,函数计算玩转 AI 大模型》方案利用云函数计算简化AI大模型部署,实现快速响应和资源优化。本文从实践原理、部署体验、优势展示及应用场景四方面评估,指出其便捷性与成本效益,但也提到文档解释不足、跨平台支持需加强等问题,总体评价积极,认为是企业数字化转型的有效工具。
52 3
触手可及,函数计算玩转 AI 大模型
|
16天前
|
人工智能 运维 NoSQL
云栖大会|多模+一体化,构建更高效的AI应用
在2024年云栖大会「NoSQL数据库」专场,多位知名企业和阿里云瑶池数据库团队的技术专家,共同分享了阿里云Lindorm、Tair、MongoDB和MyBase的最新进展与实践。Tair推出Serverless KV服务,解决性能瓶颈和运维难题;Lindorm助力AI和具身智能时代的多模数据处理;MongoDB云原生化提升开发效率;MyBase One打破云边界,提供云边端一体化服务。这些技术进展和最佳实践,展示了阿里云在NoSQL数据库领域的创新能力和广泛应用前景。
|
16天前
|
关系型数据库 分布式数据库 数据库
云栖大会|从数据到决策:AI时代数据库如何实现高效数据管理?
在2024云栖大会「海量数据的高效存储与管理」专场,阿里云瑶池讲师团携手AMD、FunPlus、太美医疗科技、中石化、平安科技以及小赢科技、迅雷集团的资深技术专家深入分享了阿里云在OLTP方向的最新技术进展和行业最佳实践。
|
21天前
|
人工智能 自然语言处理 监控
函数计算玩转 AI 大模型
本文总结了对一个基于函数计算和AI大模型的解决方案的理解和实践体验。整体而言,方案描述详细、逻辑清晰,易于理解。但在技术细节和部署引导方面还有提升空间,如增加示例代码和常见错误解决方案。函数计算的优势在部署过程中得到了有效体现,特别是在弹性扩展和按需计费方面。然而,针对高并发场景的优化建议仍需进一步补充。总体评价认为,该解决方案框架良好,但需在文档和细节方面继续优化。
|
23天前
|
人工智能 弹性计算 监控
触手可及,函数计算玩转 AI 大模型解决方案
阿里云推出的“触手可及,函数计算玩转 AI 大模型”解决方案,利用无服务器架构,实现AI大模型的高效部署和弹性伸缩。本文从实践原理、部署体验、优势展现及应用场景等方面全面评估该方案,指出其在快速部署、成本优化和运维简化方面的显著优势,同时也提出在性能监控、资源管理和安全性等方面的改进建议。
55 5
|
2月前
|
人工智能 Cloud Native Serverless
2024云栖大会资料精选,《云原生+AI核心技术&最佳实践》PPT全量放送!
关注阿里云云原生公众号,后台回复:2024 云栖大会,即可免费下载云原生云栖大会核心资料合集。
1147 35
|
1月前
|
存储 消息中间件 人工智能
ApsaraMQ Serverless 能力再升级,事件驱动架构赋能 AI 应用
本文整理自2024年云栖大会阿里云智能集团高级技术专家金吉祥的演讲《ApsaraMQ Serverless 能力再升级,事件驱动架构赋能 AI 应用》。

相关产品

  • 云原生数据库 PolarDB