云栖大会|AI+Data,新一代智能数仓的实践与畅想

简介: 全面拥抱一站式智能化

2023云栖大会上,阿里云瑶池数据库宣布已全面实现Serverless化,并接入通义等大模型能力,大幅提升数据库一站式及智能化水平。其中,企业级智能数仓AnalyticDB与通义大模型家族深度集成,推出一站式全托管大模型解决方案。阿里云新发布的8大行业模型及“百炼”平台采用AnalyticDB作为内置向量检索引擎,性能较开源增强了2~5倍,加速AIGC应用落地。


来自PingPong、厦门国际银行、三七互娱、易点天下等知名企业代表和瑶池数据库团队产品及技术资深专家们结合真实场景实践,深入分享了AnalyticDB的最新技术进展和特性解析。此外,阿里云瑶池还宣布与ClickHouse、SelectDB发布战略合作产品公测,推进技术合作和生态协同,构建合作共赢的生态体系。


阿里云AnalyticDB MySQL产品部负责人 林亮


在云栖大会上,阿里云AnalyticDB MySQL产品部负责人林亮分享了AnalyticDB MySQL三大核心技术方向

1)云原生化:基于统一资源池,支持不同类型和规模的工作负载,按需升降,并结合新的存算分离架构,进一步解耦状态和异步计算;

2)一体化:支持日志、数据库等源头的高效无缝接入,通过统一的平台,提供跨源联邦分析,实现数据处理和分析一体化;

3)智能化:提供向量存储检索和大模型AI分析等功能,探索数据价值;智能诊断优化,基于机器学习监控实例状态,并优化潜在的性能瓶颈。


阿里云数据库事业部高级产品经理 戚亚东


阿里云数据库事业部高级产品经理戚亚东发表了题为《云原生数据仓库AnalyticDB MySQL版新特性介绍》的精彩演讲。在演讲中,他重点分享了最近发布的Multi-Cluster弹性模型、智能负载管理WLM、增量更新物化视图、全托管Spark等能力。其中,Multi-Cluster弹性模型相比Min-Max弹性模型,由于更好的隔离性,在相同资源下,查询并发度QPS可以提升25%以上,并且支持自动弹性。全托管Spark能力通过数据缓存、向量化执行等能力,相比开源社区同版本Spark,性能可以提升2.7倍以上,已经帮助多个客户实现30-50%的降本迁移。


阿里云AnalyticDB PostgreSQL产品部负责人 姚奕玮


阿里云AnalyticDB PostgreSQL产品部负责人姚奕玮在大会上介绍了在AIGC时代下,企业对于云原生数仓的需求,具体可以归纳为:性价比、与LLM融合、一站式。并且基于这些需求,介绍了AnalyticDB for PostgreSQL的发力点和核心技术:极具高性价比的流批一体融合引擎;支持实时写入和二级索引的存算分离Serverless架构;融合LLM、提供仓内智能的一站式AIGC服务;与PolarDB无缝集成的一站式HTAP服务;以及例如租户隔离、数据脱敏、异地容灾和一致性位点备份恢复等企业级能力。


阿里云数据库事业部OLAP/工具产品经理 薛菲


关于AI能力加持的企业级智能数仓AnalyticDB PosgreSQL阿里云数据库事业部OLAP/工具产品经理薛菲进行了详细介绍。她表示,对于企业级大模型项目冷启动、规模化复制和AI普惠三个阶段,AnalyticDB PosgreSQL分别提供了开箱即用的企业级知识库服务、GPU和向量数仓多租户管理及弹性扩展能力、内置的一站式AIGC开发服务,帮助企业实现大模型应用的快速扩大和可持续化的发展。


ClickHouse联合创始人,ClickHouse产品技术总裁 Yury Izrailevsky


ClickHouse作为全球流行的开源实时分析数据库,凭借其优异的性能得到了广大开发者和用户的青睐,在国内外有大量全球知名客户在使用ClickHouse。ClickHouse联合创始人、ClickHouse产品技术总裁Yury Izrailevsky发表了《云数据库ClickHouse企业版发布,产品和最佳实践介绍》演讲,他重申:“ClickHouse将继续保持在实时分析性能方面的领跑优势,当前对比其他分析产品在数据加载场景有37倍左右的性能优势,在查询方面具有20倍以上的性能优势 ,同时ClickHouse公司牵手阿里云战略合作发布阿里云ClickHouse企业版,并启动公测”。


ClickHouse企业版具有非开源的商业化SharedMergeTree引擎,基于存储计算分离的云原生架构,支持完全Serverless使用模式,可以帮助用户降低80%存储成本,50%的计算资源成本。


飞轮数据CEO,Apache Doris项目创始人 马如悦


“数据分析越实时越能为业务带来更大的价值收益。”飞轮数据CEO,Apache Doris 项目创始人马如悦分享了当前最流行的实时数仓之一Doris以及其蓬勃发展的开源社区。在会上,重磅发布了100%兼容Doris的商业化云原生实时数仓阿里云数据库SelectDB版,并正式启动公测。云数据库SelectDB版具备云原生存算分离,共享存储,单实例多集群的资源隔离能力,比用户自建Doris降低30%的资源成本。


PingPong智能数据架构师 张彦锋


金融独角兽PingPong智能数据架构师张彦锋分享了《PingPong x AnalyticDB:实时数仓演进之路》。在会上,他介绍了PingPong数据平台的演进路线:从最初的在RDS MySQL中做分析遇到在线业务和分析业务隔离问题,最终演进到一体化的AnalyticDB MySQL版,在一个产品中支撑所有数据处理和分析业务。他表示,通过使用AnalyticDB MySQL版提供的数据冷热分层能力,存储成本下降50%以上。


厦门国际银行总行科技运维部数据管理二处经理 王淇霖


厦门国际银行总行科技运维部数据管理二处经理王淇霖为现场和线上观众介绍了基于AnalyticDB PostgreSQL的升舱实践以及对新一代数仓架构的展望。他提到,通过AnalyticDB PostgreSQL,行内在线关联查询性能总体提升了2-3倍,同时实现了混合业务负载的资源隔离。


王淇霖表示,由于AnalyticDB PostgreSQL具备好的SQL兼容性、存储过程支持和细粒度的资源资源隔离,因此业务从大数据平台迁移到AnalyticDB PostgreSQL仅花费10天时间就完成,上线至今稳定运行无故障。为应对实时的业务需求,目前行已开始实现业务试点,希望未来能基于AnalyticDB PostgreSQL提供流批一体和AI原生能力,可以支撑实时和AI创新业务的快速落地。


三七互娱37手游AI算法负责人 彭佳铭


迄今为止,37手游累计运营逾2000款手机游戏。游戏客户体验回答僵化、问题理解性低以及运营成本高一直是37手游的痛点和跳转。三七互娱37手游AI算法负责人彭佳铭向现场观众介绍了AnalyticDB PostgreSQL在智能游戏客户上的应用实践。他提到,37手游通过大模型和AnalyticDB PostgreSQL向量引擎实现了全新的AI智能客服体验升级,回答准确率总体提升了20%,对于用户的意图识别和共情能力上有显著的增强,同时服务效能也提升了15%,该框架可以规模化复制到其他手游中。


易点天下高级技术总监 贺鑫

如何激活数据创新价值,以DataOps助力企业实现业务敏捷?易点天下高级技术总监贺鑫分享了公司广告营销平台的业务变迁过程以及DataOps平台的建设历程


平台搭建伊始依赖自建、开源、半托管的技术栈,技术栈多样化,缺失数据治理,数据获取效率低。通过构建统一入口、统一体验的DataOps平台,降低数据分析使用复杂度,技术选型从离线非实时的Hadoop、Spark升级到阿里云ClickHouse实时数仓。DataOps平台支持了更加实时的业务需求,提升了80%的业务收益,40%的数据计算成本。同时,在测试了阿里云ClickHouse企业版的Serverless能力后,对比社区兼容版可进一步降低20%-40%的计算资源用量,降低20%+的存储资源成本。


相关实践学习
数据库实验室挑战任务-初级任务
本场景介绍如何开通属于你的免费云数据库,在RDS-MySQL中完成对学生成绩的详情查询,执行指定类型SQL。
阿里云云原生数据仓库AnalyticDB MySQL版 使用教程
云原生数据仓库AnalyticDB MySQL版是一种支持高并发低延时查询的新一代云原生数据仓库,高度兼容MySQL协议以及SQL:92、SQL:99、SQL:2003标准,可以对海量数据进行即时的多维分析透视和业务探索,快速构建企业云上数据仓库。 了解产品 https://www.aliyun.com/product/ApsaraDB/ads
相关文章
|
26天前
|
人工智能 NoSQL Serverless
基于函数计算3.0 Stable Diffusion Serverless API 的AI艺术字头像生成应用搭建与实践的报告
本文主要分享了自己基于函数计算3.0 Stable Diffusion Serverless API 的AI艺术字头像生成应用搭建与实践的报告
343 6
基于函数计算3.0 Stable Diffusion Serverless API 的AI艺术字头像生成应用搭建与实践的报告
|
2月前
|
机器学习/深度学习 人工智能 自然语言处理
【AI 现况分析】AI 如何提高开发效率,在生产中的实践
【1月更文挑战第27天】【AI 现况分析】AI 如何提高开发效率,在生产中的实践
|
2月前
|
机器学习/深度学习 人工智能 自然语言处理
CodeWave智能开发平台--试用--目标:AI应用广场试用1
CodeWave智能开发平台--试用--目标:AI应用广场试用1
|
7天前
|
人工智能 机器人 Go
飞书+ChatGPT搭建智能AI助手,无公网ip实现公网访问飞书聊天界面
飞书+ChatGPT搭建智能AI助手,无公网ip实现公网访问飞书聊天界面
38 0
|
2月前
|
传感器 人工智能 监控
Springcloud+Vue智慧工地管理云平台源码 AI智能识别
“智慧工地管理平台”以现场实际施工及管理经验为依托,针对工地现场痛点,能在工地落地实施的模块化、一体化综合管理平台。为建筑公司、地产公司、监管单位租赁企业、设备生产厂提供了完整的数据接入和管理服务。
43 2
|
2月前
|
人工智能 自然语言处理 机器人
移动互联网医院AI智能导诊系统源码
该功能首先是完成各类医学文献中的医学知识抽取,并对所抽取的知识进行理解和加工,包括将医学专业术语与患者语言进行对应、推理症状与疾病间的对应关系和问答对话逻辑,然后通过对医生的专业擅长、过往的诊疗经历,刻画出全面、详细、实时的医生画像,以智能问答的人机对话形式精准匹配最合适的医liao资源。
|
2月前
|
机器学习/深度学习 人工智能 自然语言处理
AI大发展:人机交互、智能生活全解析
AI大发展:人机交互、智能生活全解析
40 0
|
3天前
|
机器学习/深度学习 人工智能 安全
揭秘AI扑克智能:技术演进与应用前瞻
随着人工智能(AI)技术的不断革新和发展,它已经深入到我们日常生活的诸多方面。AI扑克,作为智能科学与游戏娱乐的跨界融合,不仅为扑克游戏增添了刺激的科技元素,也成为人工智能发展的一个重要测试场。本文将全面探讨AI扑克的技术演进、实际应用,并预视其未来可能带来的行业变革。
|
5天前
|
人工智能
瓴羊One·客服与AI大模型技术联合打造智能服务新体验
瓴羊One·客服与AI大模型技术联合打造智能服务新体验
|
6天前
|
人工智能 自然语言处理 程序员
优刻得为智谱AI构建超千卡推理集群,让全球用户畅享大模型智能生活
在「智谱清言」的助力下,妈妈的小说创作焕发新生,她只需将自己的创意和构思输入给大模型,就可以生成自然生动的故事情节和对话;爸爸用大模型进行代码编程和调试,通过分析代码逻辑,大大减少了开发的繁琐流程,减轻了一大半的⼯作量;大模型也成为了小朋友学习上的得力助手,不仅能进行作业智能批改,还可以提供详实的解题思路,大幅提升了学习效率。

相关产品

  • 云原生数据仓库AnalyticDB MySQL版