PolarDB在2021 ACM SIGMOD

本文涉及的产品
云原生数据库 PolarDB PostgreSQL 版,标准版 2核4GB 50GB
云原生数据库 PolarDB MySQL 版,通用型 2核8GB 50GB
函数计算FC,每月15万CU 3个月
简介: 阿里云自研数据库PolarDB在2021 ACM SIGMOD国际数据库顶级会议上发表的论文《PolarDB Serverless: A Cloud Native Database for Disaggregated Data Centers》中,提出了一种基于计算存储分离的最新Serverless技术架构。这一突破性技术被认为是下一代数据库服务的发展方向,标志着我国自研数据库在最新一代架构的探索上更进一步。

阿里云自研数据库PolarDB在2021 ACM SIGMOD国际数据库顶级会议上发表的论文《PolarDB Serverless: A Cloud Native Database for Disaggregated Data Centers》中,提出了一种基于计算存储分离的最新Serverless技术架构。这一突破性技术被认为是下一代数据库服务的发展方向,标志着我国自研数据库在最新一代架构的探索上更进一步。
早期的云上数据库,主要以ECS中的自建数据库和云厂商托管的数据库RDS的形态存在。这些云上数据库架构虽然使用了传统数据库的架构,并运行在云的基础设施上,但并未对数据库本身进行太多改造和适配。这导致其资源利用率受到较大限制,无法充分利用云的红利。以亚马逊Aurora和阿里云PolarDB为代表的第一代云原生数据库,虽然实现了存储和计算分离,并基于此实现了一写多读,一定程度上适配了云架构,但CPU和内存依然强绑定,导致计算要实现真正按需供应非常困难。
PolarDB Serverless的最大创新之处在于,在业内首次实现了内存与计算/存储的解耦,内存进一步池化,形成三层池化,使得弹性能力有数量级的提升。这种设计大幅度降低了成本,实现了完全地按量使用和按需弹性,贴合各种场景。PolarDB Serverless构建了一个全新的数据库形态,即DCaaDB(Datacenter as a Database)。整个IDC形成一个多租户的大数据库,其全部的CPU、内存和存储构成三个独立的资源池。在资源池未耗尽的情况下,任何一个用户(租户)都可以任意的弹性扩展任何一种资源到任何一个规格,用户为其SQL动态消耗的CPU、内存和存储买单,不需要预置任何的规格。
PolarDB Serverless的设计背后,包含了许多技术难点。例如,如何确保系统能正确执行事务,如何高效地执行事务,以及如何构建一个可靠的系统。PolarDB Serverless通过技术创新解决了这些问题,例如使用全局的缓存一致的机制实现全局页锁,使用RDMA和乐观锁技术提高并发性,以及设计了对不同节点类型的单节点崩溃的处理策略等。
PolarDB Serverless的突破性设计,使得数据库性能得到了显著提升,远超预期。这些结果也让我们有理由预测,使用全资源分离的架构来实现云原生的Serverless数据库,会成为下一个五年的云数据库发展趋势。

相关实践学习
使用PolarDB和ECS搭建门户网站
本场景主要介绍基于PolarDB和ECS实现搭建门户网站。
阿里云数据库产品家族及特性
阿里云智能数据库产品团队一直致力于不断健全产品体系,提升产品性能,打磨产品功能,从而帮助客户实现更加极致的弹性能力、具备更强的扩展能力、并利用云设施进一步降低企业成本。以云原生+分布式为核心技术抓手,打造以自研的在线事务型(OLTP)数据库Polar DB和在线分析型(OLAP)数据库Analytic DB为代表的新一代企业级云原生数据库产品体系, 结合NoSQL数据库、数据库生态工具、云原生智能化数据库管控平台,为阿里巴巴经济体以及各个行业的企业客户和开发者提供从公共云到混合云再到私有云的完整解决方案,提供基于云基础设施进行数据从处理、到存储、再到计算与分析的一体化解决方案。本节课带你了解阿里云数据库产品家族及特性。
目录
相关文章
|
8月前
|
存储 关系型数据库 分布式数据库
重磅|顶会最高奖+1,阿里云PolarDB再获SIGMOD最佳论文奖
阿里云斩获SIGMOD 2024最佳论文,PolarDB成功破解经典多主架构难题
重磅|顶会最高奖+1,阿里云PolarDB再获SIGMOD最佳论文奖
|
7月前
|
关系型数据库 分布式数据库 PolarDB
顶会最高奖+1 !阿里云PolarDB再获SIGMOD最佳论文奖
顶会最高奖+1 !阿里云PolarDB再获SIGMOD最佳论文奖
62 1
|
安全 Cloud Native 关系型数据库
联合浙大斩获SIGMOD最佳论文,PolarDB团队解读产学合作新范式
针对本次PolarDB 查询优化器当中的漏洞探测这一传统经典问题,阿里云与浙大的研究团队创新使用Learning-Base的方法来指导在给定shcehma集合之上搜寻有效的Join Query组合,最终取得了突破性成果,这充分展现了计算机系统多领域交叉技术研究的效力。下文概述本篇论文要解决的核心问题及技术思路。
联合浙大斩获SIGMOD最佳论文,PolarDB团队解读产学合作新范式
|
安全 关系型数据库 分布式数据库
记SIGMOD最佳论文的诞生,由PolarDB团队的一次张榜说起
记SIGMOD最佳论文的诞生,由PolarDB团队的一次张榜说起
174 0
|
机器学习/深度学习 安全 Cloud Native
历史首次!阿里云与浙大斩获数据库顶会SIGMOD最佳论文,成果已在PolarDB中落地
数据库漏洞检测提速100倍,阿里云与浙大成果斩获202 3SIGMOD最佳论文奖
|
1月前
|
Cloud Native 关系型数据库 分布式数据库
让PolarDB更了解您--PolarDB云原生数据库核心功能体验馆
让PolarDB更了解您——PolarDB云原生数据库核心功能体验馆,由阿里云数据库产品事业部负责人宋震分享。内容涵盖PolarDB技术布局、开源进展及体验馆三大部分。技术布局包括云计算加速数据库演进、数据处理需求带来的变革、软硬协同优化等;开源部分介绍了兼容MySQL和PostgreSQL的两款产品;体验馆则通过实际操作让用户直观感受Serverless、无感切换、SQL2Map等功能。
107 7
|
6天前
|
存储 关系型数据库 分布式数据库
PolarDB 开源基础教程系列 8 数据库生态
PolarDB是一款开源的云原生分布式数据库,源自阿里云商业产品。为降低使用门槛,PolarDB携手伙伴打造了完整的开源生态,涵盖操作系统、芯片、存储、集成管控、监控、审计、开发者工具、数据同步、超融合计算、ISV软件、开源插件、人才培养、社区合作及大型用户合作等领域。通过这些合作伙伴,PolarDB提供了丰富的功能和服务,支持多种硬件和软件环境,满足不同用户的需求。更多信息请访问[PolarDB开源官方网站](https://openpolardb.com/home)。
38 4
|
30天前
|
存储 关系型数据库 分布式数据库
PolarDB PostgreSQL版:商业数据库替换与企业上云首选
PolarDB PostgreSQL版是商业数据库替换与企业上云的首选。其技术架构实现存储计算分离,具备极致弹性和扩展性,支持Serverless、HTAP等特性。产品在弹性、性能、成本优化和多模处理方面有显著提升,如冷热数据自动分层、Ganos多模引擎等。已在汽车、交通、零售等行业成功应用,典型案例包括小鹏汽车、中远海科等,帮助企业大幅降低运维成本并提高业务效率。
46 13
|
30天前
|
容灾 关系型数据库 分布式数据库
PolarDB分布式版:与云融合的分布式数据库发展新阶段
PolarDB分布式版标志着分布式数据库与云融合的新阶段。它经历了三个发展阶段:从简单的分布式中间件,到一体化分布式架构,再到云原生分布式数据库。PolarDB充分利用云资源的弹性、高性价比、高可用性和隔离能力,解决了大规模数据扩展性问题,并支持多租户场景和复杂事务处理。零售中台的建设背景包括国家数字化转型战略及解决信息孤岛问题,采用分布式数据库提升高可用性和性能,满足海量订单处理需求。展望未来,零售中台将重点提升容灾能力、优化资源利用并引入AI技术,以实现更智能的服务和更高的业务连续性。
|
1月前
|
关系型数据库 分布式数据库 数据库
瑶池数据库大讲堂|PolarDB HTAP:为在线业务插上实时分析的翅膀
瑶池数据库大讲堂介绍PolarDB HTAP,为在线业务提供实时分析能力。内容涵盖MySQL在线业务的分析需求与现有解决方案、PolarDB HTAP架构优化、针对分析型负载的优化(如向量化执行、多核并行处理)及近期性能改进和用户体验提升。通过这些优化,PolarDB HTAP实现了高效的数据处理和查询加速,帮助用户更好地应对复杂业务场景。