2022云栖精选—云数据库RDS重磅功能发布与最佳实践

本文涉及的产品
云原生数据库 PolarDB 分布式版,标准版 2核8GB
RDS PostgreSQL Serverless,0.5-4RCU 50GB 3个月
推荐场景:
对影评进行热评分析
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
简介: 彭祥阿里云数据库事业部资深技术专家RDS产品部负责人许鸿斌阿里云数据库事业部高级产品专家

lQLPJxbcF2cqNBvMiM0FeLCMz4ifcSGHeANpqgFLAEAA_1400_136.png

一、整体介绍

image.png

阿里云RDS伴随着阿里云的成长而成长,经历了不同发展阶段,从最初脚本运营方式发展到平台化、商业化。在产品能力上逐步支持了 OpenAPI PostgreSQLSQLServer等多引擎

阿里云RDS在过去几年中经历了智能化演进,比如通过DAS的机器学习能力支撑智能决策,通过性能参数MySQL治理等提升引擎产品能力。2021,阿里云RDS进行了架构升级全向原生演进,充分将阿里云底层IaaS资源服务能力通过PaaS服务进行透传。并在此基础上进行了创新,包括ServerlessECS

image.png

阿里云RDS从过去基于物理机隔离的架构逐步朝着All On Ecs的方向演进,将PaaS产品能力构建IaaS资源服务能力上,再基于 ECS 以及ESSD实现存算分离架构进行资源解耦,产品能力带来极大的提升,比如可基于快照秒级恢复以及计算存储独立扩容和缩容的能力

在计算存储分离架构基础之上,构建了基于K8s集群调度系统,将引擎产品容器化部署到ECS服务器上。

在分层管控架构之上,我们构建自己Serverless产品能力。使用统一管控架构支撑四款不同产品,包括 MySQLPostgreSQLMariaDB以及SQL Server除了硬核技术以外,我们也通过多种产品能力帮助开发人员提高开发效率。


二、产品趋势及技术解读

image.png

数据库在传统的RDS阶段,计算节点存储容量都需要预设比如通过运维人员根据业务需求进行手动配置,计算规格有限,严重限制了业务开发人员的开发效率以及 DBA 运维效率。

云原生 RDS 能够利用DAS产品进行智能化调度,智能化预测产品或用户业务需要多少资源量,可以自动进行伸缩

RDS Serverless1.02.0阶段希望客户无需关心资源计算规格存储容量都够随着业务量发展进行扩缩容

image.png

传统 RDS 架构运维人员需要根据业务的波峰波谷进行手动扩缩容,难以精准预计,极易出现资源浪费或资源储备不够的情况。同时,传统 RDS 架构下,资源伸缩的范围有限,无法完全满足业务需求。

而在Serverless架构下,计算规格存储容量能够随着业务波峰和波谷进行弹升弹降极大提升了运维人员的工作效率。同时,可以对资源进行更精细化、更准确的配置,节约大量成本。

image.png

RDS Servereless产品为业务带来了以下核心竞争优势:

第一,资源配置可随着业务负载实现秒级弹性伸缩。

第二,按需使用,按量计费。

第三,构建在内核功能创新之上,实现了内核BP Online Resize优化,弹得更稳

第四,支持 RESTful API 访问机制。只需一个endpoint即可通过RestAPI HTTP 协议进行访问和操作,配置数据库资源。

image.png

我们实现了RDS On倚天ECS,包括底层 CPU 构、ECS 机器,到上层数据库全栈资源,并实现了软硬协同优化使得RDS On倚天ECS性能稳定性等各个方技术指标看齐并超越最新一代的X86机型平均性能提升10%,性价比提升25%,并实现了0成本的应用适配。

image.png

从过去的RDS迁移到ECS架构存在大量稳定性问题,需要持续不断创新深度优化才能使新架构的产品竞争力看齐过去物理机形态的能力

我们对Binlog体系进行了改造,实现了Binlog In Redo模式,原先事务提交commit两次IO操作降为一次,大幅提升写操作吞吐同时,对Binlog的写模式也进行了深入调整。

RTO 是众多数据库使用者最关心核心指标。 RDS产品过去在RTO上做了大量优化。比如大事务Recovery优化,从过去的需要小时级降至秒级;同时,对Buffer Pool进行了并行初始化优化,提升RTO指标,对Reo核心组件进行了深度优化,提升产品能力。


三、产品功能发布

image.png

我们一直在思考,能否有这样一种产品形态,既能够兼顾实例的整体可用性,同时又能够最大范围实现降本增效。因此,阿里云出了RDS MySQL的新形态——RDS MySQL集群版。

集群版相比之前高可能架构存在两点颇为明显变化。

第一,集群版支持同时挂载多个节点,这意味着会有多个备库,同时所有备将开放给业务访问实现资源最大化利用,降低成本

第二,集群版不仅提供了最高49全球最高等级SLA服务保障,同时还通过内置MySQL主复制技术结合内置Paxos分布式协议算法,确保数据多点性,确保数据永不丢失。

以最小成本实现数据服务可用性以及数据可靠性最高级别保障,是 RDS MySQL集群版最大竞争力

image.png

RDS通过一系列产品功能矩阵,实现整体业务降本增效。

在计算节点上,支持了基础版的只读实例,针对有明显使用时间的业务,在业务停用之后可以同步暂停RDS实例实例期间不收取任何计算节点费用,需要时又可以快速将它拉起用于生产业务。

存储节点部分也进行了核心优化。依赖云盘能力支持了从PL0PL3全等级云盘矩阵,同时可以根据线上业务吞吐需求,在PL0PL3之间随时进行无损在线变化。

存储流量层通过数据库内部核心技术实现了云盘缩容能力,可以根据业务数据量变化实现云盘存储空间分配以及降本。

不论是计算节点实例暂停还是存储节点可升可降,我们始终希望业务不同阶段可以在RDS上获得最优的资源成本解决方案。

image.png

RDS与数据库备份产品DBS深度集成之后推出新特性:急速备份及恢复能力。数据库物理备份中,往往会涉及到跨存储介质的数据传输以及恢复耗时耗力。而通过RDS极速备份及恢复能力,可以实现对全量及增量物理备份和文件实时自动合成快照备份。进行数据恢复时,可以通过快照秒级挂载实现数据的快速恢复,大幅度缩短数据恢复时长。此前恢复1T数据大约需要4小时,而现在仅需30分钟,数据效率恢复提升达88%

同时也支持了针对单库单级别恢复能力,该能力可大范围应用在诸如游戏多租户,需要单库单表回档场景,让线上业务以最快速度回到正确状态。

image.png

RDS的可观测性体验也得到了增强。首先提升了更多资源监控指标,客户可以针对RDS实例进行更全面的掌控。其次支持了全局视角自定义监控大盘可以根据多实例、多时间点多监控进行数据聚集、展示以及对比分析。

针对最为常用的指标比如资源、空间、链接、SQL 支持定期常态化自动巡检,会定期给出报告,发布告警,用户可对全局运行状态实现全面掌控。

image.png

PostgreSQL被誉为全球最先进开源数据库,而RDS PostgreSQL通过插件能力扩展了其使用场景。我们发布了Ganos时空引擎插件,可应用在高新地图路径规划场景发布了全加密数据库插件,可以实现从内存到磁盘全链路最高等级加密发布了PASE高维项目插件,可应用于图像识别、 AI 机器人等场景发布了Babelfish插件可以实现对SQL Server数据库兼容以及对商业数据库替换。

以上插件能力加持使得RDSAI时空加密等场景上具备了更好为业务提供服务基础能力。


四、最佳实践

image.png

从线上真实数据可以看到Serverless已经广泛应用资源波动具备不确定性负载场景中,比如运维及开发环境、IDC到云上容灾环境、音视频不定时转码多人在线协同办公系统等。以上场景均具备一个共同特征业务间断不连续但在业务高峰期对数据库性能有着极高要求。

RDS Serverless通过秒极弹升、按需付费能力,可以很好地满足此类场景的需求。在业务低峰,可以保持在较低水位线运行,而在业务高峰到来时,又可以快速弹升以应对业务流量。大幅降低了资源成本,最高降本70%真正实现了增效并且降本。

image.png

Babelfish具备了SQL Server商业引擎语法兼容能力。在RDS启用Babelfish插件之后,可通过SQL Server语法以及 PG语法同时对数据库进行访问,以开源数据库引擎能力以及成本实现商户数据库引擎能力,进而将商业数据SQL Server替换,使得数据库采购成本下降 60%-70%

image.png

RDS砥砺前行,经历了十年发展之后,无论是从最底层协同一体化,还是数据库最核心内核优化,亦或是最上层集群MySQL形态推出,始终致力于让每一个客户获得更快、更稳、更安全、更好用数据库使用体验。

lQLPJxbcF2cqM2TM-M0CnrCgW_7LDpyh1wNpqgFKAPsA_670_248.png

相关实践学习
如何快速连接云数据库RDS MySQL
本场景介绍如何通过阿里云数据管理服务DMS快速连接云数据库RDS MySQL,然后进行数据表的CRUD操作。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
2月前
|
存储 NoSQL 关系型数据库
PolarDB开源数据库进阶课17 集成数据湖功能
本文介绍了如何在PolarDB数据库中接入pg_duckdb、pg_mooncake插件以支持数据湖功能, 可以读写对象存储的远程数据, 支持csv, parquet等格式, 支持delta等框架, 并显著提升OLAP性能。
69 1
|
3月前
|
Cloud Native 关系型数据库 分布式数据库
让PolarDB更了解您--PolarDB云原生数据库核心功能体验馆
让PolarDB更了解您——PolarDB云原生数据库核心功能体验馆,由阿里云数据库产品事业部负责人宋震分享。内容涵盖PolarDB技术布局、开源进展及体验馆三大部分。技术布局包括云计算加速数据库演进、数据处理需求带来的变革、软硬协同优化等;开源部分介绍了兼容MySQL和PostgreSQL的两款产品;体验馆则通过实际操作让用户直观感受Serverless、无感切换、SQL2Map等功能。
158 7
|
16天前
|
SQL Linux 数据库
【YashanDB知识库】崖山数据库Outline功能验证
本文来自YashanDB官网,主要测试了数据库优化器在不同场景下优先使用outline计划的功能。测试环境包括相同版本新增数据、绑定参数执行、单机主备架构以及数据库版本升级等场景。通过创建表、插入数据、收集统计信息和创建outline等步骤,验证了在各种情况下优化器均能优先采用存储的outline计划。测试结果表明,即使统计信息失效或数据库版本升级,outline功能依然稳定有效,确保查询计划的一致性和性能优化。详情可见[原文链接](https://www.yashandb.com/newsinfo/7488286.html?templateId=1718516)。
【YashanDB知识库】崖山数据库Outline功能验证
|
25天前
|
数据库连接 PHP 数据库
【YashanDB知识库】PHP使用ODBC使用数据库绑定参数功能异常
【YashanDB知识库】PHP使用ODBC使用数据库绑定参数功能异常
|
25天前
|
PHP 数据库
【YashanDB知识库】PHP使用OCI接口使用数据库绑定参数功能异常
【YashanDB知识库】PHP使用OCI接口使用数据库绑定参数功能异常
|
30天前
|
存储 NoSQL 关系型数据库
Apifox与Apipost数据库连接功能详细对比,让接口管理更高效!
Apipost 更加全面:无论是关系型还是非关系型数据库,它都为开发者提供了一站式解决方案,非常适合数据库架构复杂的大型项目。相对来说,Apifox偏重关系型分析和管理:若项目主要需求在于管理关系型数据库,而对非关系型的依赖较小,Apifox倒是可以应付。
46 2
|
2月前
|
关系型数据库 数据库 数据安全/隐私保护
云数据库实战:基于阿里云RDS的Python应用开发与优化
在互联网时代,数据驱动的应用已成为企业竞争力的核心。阿里云RDS为开发者提供稳定高效的数据库托管服务,支持多种数据库引擎,具备自动化管理、高可用性和弹性扩展等优势。本文通过Python应用案例,从零开始搭建基于阿里云RDS的数据库应用,详细演示连接、CRUD操作及性能优化与安全管理实践,帮助读者快速上手并提升应用性能。
|
2月前
|
存储 关系型数据库 分布式数据库
PolarDB开源数据库进阶课16 接入PostGIS全功能及应用举例
本文介绍了如何在PolarDB数据库中接入PostGIS插件全功能,实现地理空间数据处理。此外,文章还提供了使用PostGIS生成泰森多边形(Voronoi diagram)的具体示例,帮助用户理解其应用场景及操作方法。
49 1
|
19天前
|
SQL 关系型数据库 数据库连接
|
3月前
|
存储 Java 数据库连接
时序数据库TDengine 3.3.5.0 发布:高并发支持与增量备份功能引领新升级
TDengine 3.3.5.0 版本正式发布,带来多项更新与优化。新特性包括提升 MQTT 稳定性和高并发性能、新增 taosX 增量备份与恢复、支持 JDBC 和 Rust 连接器 STMT2 接口、灵活配置 Grafana Dashboard 等。性能优化涵盖查询内存管控、多级存储迁移、强密码策略等,全面提升时序数据管理的效率和可靠性。欢迎下载体验并提出宝贵意见。
70 5

相关产品

  • 云数据库 RDS MySQL 版
  • 云数据库 RDS