云栖大会|AI+Data,新一代智能数仓的实践与畅想

本文涉及的产品
阿里云百炼推荐规格 ADB PostgreSQL,4核16GB 100GB 1个月
云原生数据仓库AnalyticDB MySQL版,基础版 8ACU 100GB 1个月
简介: 全面拥抱一站式智能化

2023云栖大会上,阿里云瑶池数据库宣布已全面实现Serverless化,并接入通义等大模型能力,大幅提升数据库一站式及智能化水平。其中,企业级智能数仓AnalyticDB与通义大模型家族深度集成,推出一站式全托管大模型解决方案。阿里云新发布的8大行业模型及“百炼”平台采用AnalyticDB作为内置向量检索引擎,性能较开源增强了2~5倍,加速AIGC应用落地。


来自PingPong、厦门国际银行、三七互娱、易点天下等知名企业代表和瑶池数据库团队产品及技术资深专家们结合真实场景实践,深入分享了AnalyticDB的最新技术进展和特性解析。此外,阿里云瑶池还宣布与ClickHouse、SelectDB发布战略合作产品公测,推进技术合作和生态协同,构建合作共赢的生态体系。


阿里云AnalyticDB MySQL产品部负责人 林亮


在云栖大会上,阿里云AnalyticDB MySQL产品部负责人林亮分享了AnalyticDB MySQL三大核心技术方向

1)云原生化:基于统一资源池,支持不同类型和规模的工作负载,按需升降,并结合新的存算分离架构,进一步解耦状态和异步计算;

2)一体化:支持日志、数据库等源头的高效无缝接入,通过统一的平台,提供跨源联邦分析,实现数据处理和分析一体化;

3)智能化:提供向量存储检索和大模型AI分析等功能,探索数据价值;智能诊断优化,基于机器学习监控实例状态,并优化潜在的性能瓶颈。


阿里云数据库事业部高级产品经理 戚亚东


阿里云数据库事业部高级产品经理戚亚东发表了题为《云原生数据仓库AnalyticDB MySQL版新特性介绍》的精彩演讲。在演讲中,他重点分享了最近发布的Multi-Cluster弹性模型、智能负载管理WLM、增量更新物化视图、全托管Spark等能力。其中,Multi-Cluster弹性模型相比Min-Max弹性模型,由于更好的隔离性,在相同资源下,查询并发度QPS可以提升25%以上,并且支持自动弹性。全托管Spark能力通过数据缓存、向量化执行等能力,相比开源社区同版本Spark,性能可以提升2.7倍以上,已经帮助多个客户实现30-50%的降本迁移。


阿里云AnalyticDB PostgreSQL产品部负责人 姚奕玮


阿里云AnalyticDB PostgreSQL产品部负责人姚奕玮在大会上介绍了在AIGC时代下,企业对于云原生数仓的需求,具体可以归纳为:性价比、与LLM融合、一站式。并且基于这些需求,介绍了AnalyticDB for PostgreSQL的发力点和核心技术:极具高性价比的流批一体融合引擎;支持实时写入和二级索引的存算分离Serverless架构;融合LLM、提供仓内智能的一站式AIGC服务;与PolarDB无缝集成的一站式HTAP服务;以及例如租户隔离、数据脱敏、异地容灾和一致性位点备份恢复等企业级能力。


阿里云数据库事业部OLAP/工具产品经理 薛菲


关于AI能力加持的企业级智能数仓AnalyticDB PosgreSQL阿里云数据库事业部OLAP/工具产品经理薛菲进行了详细介绍。她表示,对于企业级大模型项目冷启动、规模化复制和AI普惠三个阶段,AnalyticDB PosgreSQL分别提供了开箱即用的企业级知识库服务、GPU和向量数仓多租户管理及弹性扩展能力、内置的一站式AIGC开发服务,帮助企业实现大模型应用的快速扩大和可持续化的发展。


ClickHouse联合创始人,ClickHouse产品技术总裁 Yury Izrailevsky


ClickHouse作为全球流行的开源实时分析数据库,凭借其优异的性能得到了广大开发者和用户的青睐,在国内外有大量全球知名客户在使用ClickHouse。ClickHouse联合创始人、ClickHouse产品技术总裁Yury Izrailevsky发表了《云数据库ClickHouse企业版发布,产品和最佳实践介绍》演讲,他重申:“ClickHouse将继续保持在实时分析性能方面的领跑优势,当前对比其他分析产品在数据加载场景有37倍左右的性能优势,在查询方面具有20倍以上的性能优势 ,同时ClickHouse公司牵手阿里云战略合作发布阿里云ClickHouse企业版,并启动公测”。


ClickHouse企业版具有非开源的商业化SharedMergeTree引擎,基于存储计算分离的云原生架构,支持完全Serverless使用模式,可以帮助用户降低80%存储成本,50%的计算资源成本。


飞轮数据CEO,Apache Doris项目创始人 马如悦


“数据分析越实时越能为业务带来更大的价值收益。”飞轮数据CEO,Apache Doris 项目创始人马如悦分享了当前最流行的实时数仓之一Doris以及其蓬勃发展的开源社区。在会上,重磅发布了100%兼容Doris的商业化云原生实时数仓阿里云数据库SelectDB版,并正式启动公测。云数据库SelectDB版具备云原生存算分离,共享存储,单实例多集群的资源隔离能力,比用户自建Doris降低30%的资源成本。


PingPong智能数据架构师 张彦锋


金融独角兽PingPong智能数据架构师张彦锋分享了《PingPong x AnalyticDB:实时数仓演进之路》。在会上,他介绍了PingPong数据平台的演进路线:从最初的在RDS MySQL中做分析遇到在线业务和分析业务隔离问题,最终演进到一体化的AnalyticDB MySQL版,在一个产品中支撑所有数据处理和分析业务。他表示,通过使用AnalyticDB MySQL版提供的数据冷热分层能力,存储成本下降50%以上。


厦门国际银行总行科技运维部数据管理二处经理 王淇霖


厦门国际银行总行科技运维部数据管理二处经理王淇霖为现场和线上观众介绍了基于AnalyticDB PostgreSQL的升舱实践以及对新一代数仓架构的展望。他提到,通过AnalyticDB PostgreSQL,行内在线关联查询性能总体提升了2-3倍,同时实现了混合业务负载的资源隔离。


王淇霖表示,由于AnalyticDB PostgreSQL具备好的SQL兼容性、存储过程支持和细粒度的资源资源隔离,因此业务从大数据平台迁移到AnalyticDB PostgreSQL仅花费10天时间就完成,上线至今稳定运行无故障。为应对实时的业务需求,目前行已开始实现业务试点,希望未来能基于AnalyticDB PostgreSQL提供流批一体和AI原生能力,可以支撑实时和AI创新业务的快速落地。


三七互娱37手游AI算法负责人 彭佳铭


迄今为止,37手游累计运营逾2000款手机游戏。游戏客户体验回答僵化、问题理解性低以及运营成本高一直是37手游的痛点和跳转。三七互娱37手游AI算法负责人彭佳铭向现场观众介绍了AnalyticDB PostgreSQL在智能游戏客户上的应用实践。他提到,37手游通过大模型和AnalyticDB PostgreSQL向量引擎实现了全新的AI智能客服体验升级,回答准确率总体提升了20%,对于用户的意图识别和共情能力上有显著的增强,同时服务效能也提升了15%,该框架可以规模化复制到其他手游中。


易点天下高级技术总监 贺鑫

如何激活数据创新价值,以DataOps助力企业实现业务敏捷?易点天下高级技术总监贺鑫分享了公司广告营销平台的业务变迁过程以及DataOps平台的建设历程


平台搭建伊始依赖自建、开源、半托管的技术栈,技术栈多样化,缺失数据治理,数据获取效率低。通过构建统一入口、统一体验的DataOps平台,降低数据分析使用复杂度,技术选型从离线非实时的Hadoop、Spark升级到阿里云ClickHouse实时数仓。DataOps平台支持了更加实时的业务需求,提升了80%的业务收益,40%的数据计算成本。同时,在测试了阿里云ClickHouse企业版的Serverless能力后,对比社区兼容版可进一步降低20%-40%的计算资源用量,降低20%+的存储资源成本。


相关实践学习
AnalyticDB MySQL海量数据秒级分析体验
快速上手AnalyticDB MySQL,玩转SQL开发等功能!本教程介绍如何在AnalyticDB MySQL中,一键加载内置数据集,并基于自动生成的查询脚本,运行复杂查询语句,秒级生成查询结果。
阿里云云原生数据仓库AnalyticDB MySQL版 使用教程
云原生数据仓库AnalyticDB MySQL版是一种支持高并发低延时查询的新一代云原生数据仓库,高度兼容MySQL协议以及SQL:92、SQL:99、SQL:2003标准,可以对海量数据进行即时的多维分析透视和业务探索,快速构建企业云上数据仓库。 了解产品 https://www.aliyun.com/product/ApsaraDB/ads
相关文章
|
13天前
|
存储 人工智能 Cloud Native
云栖重磅|从数据到智能:Data+AI驱动的云原生数据库
在9月20日2024云栖大会上,阿里云智能集团副总裁,数据库产品事业部负责人,ACM、CCF、IEEE会士(Fellow)李飞飞发表《从数据到智能:Data+AI驱动的云原生数据库》主题演讲。他表示,数据是生成式AI的核心资产,大模型时代的数据管理系统需具备多模处理和实时分析能力。阿里云瑶池将数据+AI全面融合,构建一站式多模数据管理平台,以数据驱动决策与创新,为用户提供像“搭积木”一样易用、好用、高可用的使用体验。
云栖重磅|从数据到智能:Data+AI驱动的云原生数据库
|
8天前
|
存储 XML 人工智能
深度解读AI在数字档案馆中的创新应用:高效识别与智能档案管理
基于OCR技术的纸质档案电子化方案,通过先进的AI能力平台,实现手写、打印、复古文档等多格式高效识别与智能归档。该方案大幅提升了档案管理效率,确保数据安全与隐私,为档案馆提供全面、智能化的电子化管理解决方案。
87 48
|
11天前
|
人工智能 数据挖掘 数据库
拥抱Data+AI|破解电商7大挑战,DMS+AnalyticDB助力企业智能决策
本文为数据库「拥抱Data+AI」系列连载第1篇,该系列是阿里云瑶池数据库面向各行业Data+AI应用场景,基于真实客户案例&最佳实践,展示Data+AI行业解决方案的连载文章。本篇内容针对电商行业痛点,将深入探讨如何利用数据与AI技术以及数据分析方法论,为电商行业注入新的活力与效能。
拥抱Data+AI|破解电商7大挑战,DMS+AnalyticDB助力企业智能决策
|
11天前
|
人工智能 数据库 决策智能
拥抱Data+AI|如何破解电商7大挑战?DMS+AnalyticDB助力企业智能决策
本文为阿里云瑶池数据库「拥抱Data+AI」系列连载第1篇,聚焦电商行业痛点,探讨如何利用数据与AI技术及分析方法论,为电商注入新活力与效能。文中详细介绍了阿里云Data+AI解决方案,涵盖Zero-ETL、实时在线分析、混合负载资源隔离、长周期数据归档等关键技术,帮助企业应对数据在线重刷、实时分析、成本优化等挑战,实现智能化转型。
拥抱Data+AI|如何破解电商7大挑战?DMS+AnalyticDB助力企业智能决策
|
1天前
|
人工智能 文字识别 运维
AI多模态的5大核心关键技术,让高端制造实现智能化管理
结合大模型应用场景,通过AI技术解析高端制造业的复杂设备与文档数据,自动化地将大型零件、机械图纸、操作手册等文档结构化。核心技术包括版面识别、表格抽取、要素抽取和文档抽取,实现信息的系统化管理和高效查询,大幅提升设备维护和生产管理的效率。
|
12天前
|
人工智能 运维 关系型数据库
云栖大会|数据库与AI全面融合,迈入数据智能新纪元
2024年云栖大会「数据库与AI融合」专场,来自NVIDIA、宇视科技、合思信息、杭州光云科技、MiniMax等企业的代表与阿里云瑶池数据库团队,共同分享了Data+AI全面融合的最新技术进展。阿里云发布了DMS的跨云统一开放元数据OneMeta和智能开发OneOps,推出《云数据库运维》技术图书,并介绍了PolarDB、AnalyticDB、Lindorm和Tair等产品的最新能力,展示了AI在数据库领域的广泛应用和创新。
|
2天前
|
机器学习/深度学习 人工智能 安全
AI与旅游业:旅行规划的智能助手
在数字化浪潮中,人工智能(AI)正重塑旅游业。本文探讨了AI如何通过个性化推荐、智能预测与预警、语音交互与虚拟助手、增强现实体验及可持续发展,提升旅行规划的效率、安全性和趣味性,推动旅游业创新与变革。
|
4天前
|
人工智能 自然语言处理 关系型数据库
从数据到智能,一站式带你了解 Data+AI 精选解决方案、特惠权益
从 Data+AI 精选解决方案、特惠权益等,一站式带你了解阿里云瑶池数据库经典的AI产品服务与实践。
|
4天前
|
人工智能 安全 搜索推荐
AI与能源管理:智能电网的未来
本文探讨了AI与智能电网的融合及其对能源管理的深远影响。智能电网利用先进的信息、通信和AI技术,实现电力的自主、智能化、高效管理。AI在精准预测电力需求、实时监测与故障诊断、智能能源调度、个性化能源服务和优化可再生能源利用等方面发挥关键作用,推动能源管理的高效、智能和可持续发展。
|
5天前
|
机器学习/深度学习 人工智能 自然语言处理
AI与法律行业:智能法律咨询
在科技飞速发展的今天,人工智能(AI)正逐渐渗透到法律行业,特别是在智能法律咨询领域。本文探讨了AI在智能法律咨询中的应用现状、优势及挑战,并展望了其未来发展前景。AI技术通过大数据、自然语言处理等手段,提供高效、便捷、低成本且个性化的法律服务,但同时也面临数据隐私、法律伦理等问题。未来,AI将在技术升级、政策推动和融合创新中,为用户提供更加优质、便捷的法律服务。

热门文章

最新文章

相关产品

  • 云原生数据仓库AnalyticDB MySQL版