5篇论文入选国际顶会SIGMOD,阿里云&达摩院数据库技术研究再获认可

本文涉及的产品
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
Redis 开源版,标准版 2GB
推荐场景:
搭建游戏排行榜
简介: 近日,ACM SIGMOD 2022在美国费城召开,阿里云数据库团队5篇论文入选,覆盖云原生、智能化、安全可信等数据库前沿研究方向。其中2篇为阿里云和达摩院的独立研究,体现了阿里云在数据库领域的自研成果达到了世界先进水平,得到了业界的广泛认可。

近日,ACM SIGMOD 2022在美国费城召开,阿里云数据库团队5篇论文入选,覆盖云原生、智能化、安全可信等数据库前沿研究方向。其中2篇为阿里云和达摩院的独立研究,体现了阿里云在数据库领域的自研成果达到了世界先进水平,得到了业界的广泛认可。


ACM SIGMOD数据管理国际会议是由美国计算机协会(ACM) 数据管理专业委员会(SIGMOD)发起,是数据库领域具有最高学术地位的国际性学术会议,其收录论文代表了数据库相关技术的最高水平,也是未来技术发展的重要风向标。


阿里云数据库团队的独立研究论文《Remus: Efficient Live Migration for Distributed Databases with Snapshot Isolation》提出了一种新的分布式数据库shard在线热迁移技术,可以做到迁移shard的同时,对前端应用性能影响极小,完全零中断,对应用的吞吐和延时影响极小,适用于通用分布式数据库产品,如云原生数据库PolarDB分布式版本PolarDB-X、云原生数据仓库AnalyticDB等。Remus核心想法是利用保证分布式事务timestamp order的协议,提出了一个高效的单向同步DUAL执行模型,从而支持轻量级的数据ownership无缝平滑切换。同时结合MVCC和OCC提出了在单向DUAL模型下保证快照隔离的并发控制协议MOCC。在高并发负载(TPC-C和YCSB)以及混合负载(HTAP和实时数据分析)下,Remus相比之前的最好的方法,实现了完全零中断,对于受迁移影响的短事务可以减少10倍以上的延时增加;对于批处理长事务,可以提高30多倍的吞吐,为shared-nothing架构在云上实现极致按需弹性同时保证严格的SLA提供了基础支撑。


另一篇入选自研论文《ESDB: Processing Extremely Skewed Workloads in Real-time》提出了一种面向多租户的分布式实时负载均衡技术--动态二级散列算法,通过探测各租户的实时流量,动态调整分布式数据库的分片策略,对热点租户进行二级散列,集群无需扩容,而将激增流量实时分配到集群负载更低的节点上,避免激增流量带来的阻塞和延迟,并保障散列前后的读写一致性。同时,为了提升集群吞吐,引入了物理复制降低索引构建成本,引入RBO、联合索引和高低频索引设计大幅降低查询相应时间,引入各级熔断和连接池管理降低大卖家和慢查询带来的稳定性影响。ESDB成功解决了阿里巴巴核心交易多年困扰的热点大卖家和黑马商家造成的峰值延迟、查询性能和稳定性风险,支撑阿里巴巴核心交易及大促五年以上,技术已迁移到云原生数据仓库AnalyticDB,为更多阿里云客户提供高性能、低成本的分布式多维查询和分析能力


阿里云自成立以来就十分重视数据库前沿技术研究,并为此成立专门的研究机构——达摩院数据库与存储实验室,通过达摩院的前沿技术研究加持阿里云原生数据库产品技术。据了解,2022年度阿里云数据库团队共有15篇论文被数据库三大国际顶级会议SIGMOD、VLDB、ICDE收录


阿里云数据库产品事业部和达摩院数据库与存储实验室负责人李飞飞表示:“达摩院的一些研究成果已经通过通过阿里云数据库对外输出,不断为客户带来价值,同时也有源自于客户应用场景的实际问题不断输出到学术界,推动达摩院不断在前沿技术研究领域获得突破。达摩院加持阿里云数据库,将产品、商业、生态形成了完整闭环,未来可期。”


公开资料显示,阿里云拥有国内最强大和丰富的云数据库产品家族,自主研发了云原生关系型数据库PolarDB、云原生数据仓库AnalyticDB、云原生多模数据库Lindorm等云原生数据库产品技术,可以为企业提供一站式全链路数据管理与服务。2020年和2021年,阿里云作为中国唯一的科技厂商连续两年成功进入Gartner全球数据库领导者象限。目前已服务互联网、政府、零售、金融、电信、制造、物流等多个领域的15万客户。IDC最新数据显示,阿里云位居中国关系型数据库市场第一


modb_20220618_61f4a08e-eea7-11ec-8b43-38f9d3cd240d.png

相关实践学习
使用PolarDB和ECS搭建门户网站
本场景主要介绍基于PolarDB和ECS实现搭建门户网站。
阿里云数据库产品家族及特性
阿里云智能数据库产品团队一直致力于不断健全产品体系,提升产品性能,打磨产品功能,从而帮助客户实现更加极致的弹性能力、具备更强的扩展能力、并利用云设施进一步降低企业成本。以云原生+分布式为核心技术抓手,打造以自研的在线事务型(OLTP)数据库Polar DB和在线分析型(OLAP)数据库Analytic DB为代表的新一代企业级云原生数据库产品体系, 结合NoSQL数据库、数据库生态工具、云原生智能化数据库管控平台,为阿里巴巴经济体以及各个行业的企业客户和开发者提供从公共云到混合云再到私有云的完整解决方案,提供基于云基础设施进行数据从处理、到存储、再到计算与分析的一体化解决方案。本节课带你了解阿里云数据库产品家族及特性。
相关文章
|
3天前
|
人工智能 物联网 大数据
解密时序数据库的未来:TDengine Open Day技术沙龙精彩回顾
在数字化时代,开源已成为推动技术创新和知识共享的核心力量,尤其在数据领域,开源技术的涌现不仅促进了行业的快速发展,也让更多的开发者和技术爱好者得以参与其中。随着物联网、工业互联网等技术的广泛应用,时序数据库的需求愈发强烈,开源的兴起更是为这一技术的创新与普及提供了强有力的支持。
16 3
|
14天前
|
存储 JSON NoSQL
学习 MongoDB:打开强大的数据库技术大门
MongoDB 是一个基于分布式文件存储的文档数据库,由 C++ 编写,旨在为 Web 应用提供可扩展的高性能数据存储解决方案。它与 MySQL 类似,但使用文档结构而非表结构。核心概念包括:数据库(Database)、集合(Collection)、文档(Document)和字段(Field)。MongoDB 使用 BSON 格式存储数据,支持多种数据类型,如字符串、整数、数组等,并通过二进制编码实现高效存储和传输。BSON 文档结构类似 JSON,但更紧凑,适合网络传输。
51 15
|
2月前
|
负载均衡 网络协议 数据库
选择适合自己的数据库多实例负载均衡技术
【10月更文挑战第23天】选择适合自己的数据库多实例负载均衡技术需要全面考虑多种因素。通过深入的分析和评估,结合自身的实际情况,能够做出明智的决策,为数据库系统的高效运行提供有力保障。
120 61
|
2月前
|
SQL Java 数据库连接
在Java应用中,数据库访问常成为性能瓶颈。连接池技术通过预建立并复用数据库连接,有效减少连接开销,提升访问效率
在Java应用中,数据库访问常成为性能瓶颈。连接池技术通过预建立并复用数据库连接,有效减少连接开销,提升访问效率。本文介绍了连接池的工作原理、优势及实现方法,并提供了HikariCP的示例代码。
61 3
|
2月前
|
Java 数据库连接 数据库
深入探讨Java连接池技术如何通过复用数据库连接、减少连接建立和断开的开销,从而显著提升系统性能
在Java应用开发中,数据库操作常成为性能瓶颈。本文通过问题解答形式,深入探讨Java连接池技术如何通过复用数据库连接、减少连接建立和断开的开销,从而显著提升系统性能。文章介绍了连接池的优势、选择和使用方法,以及优化配置的技巧。
50 1
|
11天前
|
存储 Oracle 关系型数据库
数据库传奇:MySQL创世之父的两千金My、Maria
《数据库传奇:MySQL创世之父的两千金My、Maria》介绍了MySQL的发展历程及其分支MariaDB。MySQL由Michael Widenius等人于1994年创建,现归Oracle所有,广泛应用于阿里巴巴、腾讯等企业。2009年,Widenius因担心Oracle收购影响MySQL的开源性,创建了MariaDB,提供额外功能和改进。维基百科、Google等已逐步替换为MariaDB,以确保更好的性能和社区支持。掌握MariaDB作为备用方案,对未来发展至关重要。
39 3
|
11天前
|
安全 关系型数据库 MySQL
MySQL崩溃保险箱:探秘Redo/Undo日志确保数据库安全无忧!
《MySQL崩溃保险箱:探秘Redo/Undo日志确保数据库安全无忧!》介绍了MySQL中的三种关键日志:二进制日志(Binary Log)、重做日志(Redo Log)和撤销日志(Undo Log)。这些日志确保了数据库的ACID特性,即原子性、一致性、隔离性和持久性。Redo Log记录数据页的物理修改,保证事务持久性;Undo Log记录事务的逆操作,支持回滚和多版本并发控制(MVCC)。文章还详细对比了InnoDB和MyISAM存储引擎在事务支持、锁定机制、并发性等方面的差异,强调了InnoDB在高并发和事务处理中的优势。通过这些机制,MySQL能够在事务执行、崩溃和恢复过程中保持
41 3
|
11天前
|
SQL 关系型数据库 MySQL
数据库灾难应对:MySQL误删除数据的救赎之道,技巧get起来!之binlog
《数据库灾难应对:MySQL误删除数据的救赎之道,技巧get起来!之binlog》介绍了如何利用MySQL的二进制日志(Binlog)恢复误删除的数据。主要内容包括: 1. **启用二进制日志**:在`my.cnf`中配置`log-bin`并重启MySQL服务。 2. **查看二进制日志文件**:使用`SHOW VARIABLES LIKE 'log_%';`和`SHOW MASTER STATUS;`命令获取当前日志文件及位置。 3. **创建数据备份**:确保在恢复前已有备份,以防意外。 4. **导出二进制日志为SQL语句**:使用`mysqlbinlog`
54 2
|
25天前
|
关系型数据库 MySQL 数据库
Python处理数据库:MySQL与SQLite详解 | python小知识
本文详细介绍了如何使用Python操作MySQL和SQLite数据库,包括安装必要的库、连接数据库、执行增删改查等基本操作,适合初学者快速上手。
174 15
|
18天前
|
SQL 关系型数据库 MySQL
数据库数据恢复—Mysql数据库表记录丢失的数据恢复方案
Mysql数据库故障: Mysql数据库表记录丢失。 Mysql数据库故障表现: 1、Mysql数据库表中无任何数据或只有部分数据。 2、客户端无法查询到完整的信息。