【RDS】双十一背后的数据库技术

本文涉及的产品
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
云数据库 RDS MySQL,高可用系列 2核4GB
简介: 双十一是一年一度的购物盛宴,经常会出现几万人抢一个红包或者很多人共同购买一个商品的情况,这就引发了一个数据库比较担心的场景---高并发。本文将带您了解双十一阿里云RDS数据库背后技术的小秘密。

作为历届双十一重要保障之一的云数据库RDS团队,从参数优化、链路访问、弹性扩容、架构设计等方面应对高并发场景(如秒杀、百万人抢单等),保障双十一顺利进行。


数据库参数

在处理高并发场景的时候,一些特定的数据库参数就成了数据快速响应、平顺处理的关键。以RDS MySQL 5.6为例,有如下几个重要参数:

  • loose_rds_max_tmp_disk_space:控制MySQL能够使用的临时文件的大小。
  • loose_rds_threads_running_high_watermark:控制MySQL并发的查询数目,常用于秒杀业务场景。
  • loose_tokudb_buffer_pool_ratio:控制TokuDB引擎能够使用的buffer内存大小。
  • loose_max_statement_time:控制MySQL查询的最长执行时间。

接下来举例说明loose_rds_threads_running_high_watermark在秒杀场景下的影响。

loose_rds_threads_running_high_watermark.png

在秒杀活动刚开始的时候,可以看到连接数呈指数级变化,瞬间增加了10倍。

增加了10倍.png

调整参数之前,可以看到run数值非常高,会导致数据库报警。

run数值非常高.png

调整参数之后,update数值与run数值往好的方向变化,并发性能得到了增强。


链路访问

在链路访问方面,我们提供更高安全性的数据库代理访问模式,用户可以根据需要随时开启或关闭。

数据库代理对应用透明无感知,也无需人工干预,大大降低了运维成本。

数据库代理.png

目前,数据库代理支持如下功能:

  • 读写分离:提供透明的读写分离功能,应用层无需修改代码,将查询请求分发到RDS只读实例,降低主库的负载。
  • 设置连接池类型:有效解决短连接业务(例如PHP)频繁建立新连接导致实例负载过高的问题。
  • 事务拆分:能够将事务内写操作之前的读请求转发到只读实例,降低主实例负载。


弹性扩容

RDS实例支持弹性扩容,既可以纵向增加本身实例规格,也可以横向增加只读实例数量。用户提前扩容,就可以在双十一期间笑对大流量冲击,而在高峰期过后也可以及时释放掉多余实例,避免资源浪费。

弹性扩容.png


架构设计

为了应对日渐增长的双十一购买数据量和仓储数据量,RDS团队也对各个支持的数据库进行了新的架构设计,ApsaraDB for RDS当前支持五款关系型引擎,提供容灾、备份、恢复、监控等方面的全套解决方案。

RDS支持的引擎 MySQL MariaDB TX SQL Server PostgreSQL PPAS
引擎特征
  • 甲骨文公司的开源数据库(社区版)
  • LAMP的重要组成,广泛应用于互联网行业
  • MySQL的分支,兼容MySQL
  • 良好兼容Oracle
  • 微软的商业数据库
  • 对基于Windows平台.NET架构的应用程序具有完美的支持
  • 起源于UC Berkeley的开源数据库
  • 面向企业复杂SQL处理的OLTP在线事物处理场景
  • PPAS是PostgreSQL企业版
  • 高度兼容Oracle
核心优势
  • 源码性能调优、功能定制(AliSQL分支)
  • 数据库运维全套解决方案
  • MariaDB TX是企业级解决方案
  • 数据库运维全套解决方案
  • 正版License
  • 数据库运维全套解决方案
  • 源码性能调优、功能定制
  • 数据库运维全套解决方案
  • 正版License
  • 数据库运维全套解决方案
应用场景 互联网行业 互联网行业 传统中小企业 处理空间信息的相关应用 Oracle兼容应用


信息安全

信息安全问题也一直是商家和用户最关心的问题,在疯狂的“剁手”中,您一定不想您的商品信息和购买信息被泄露,对于这个问题,RDS团队做了多重保护,确保用户信息安全。

安全设计.png

除了以上几点,RDS团队还对数据库的性能等进行了重新优化,让商家和购买者完全不用担心数据库的性能和安全问题,无忧无虑的“剁手”,尽情享受双十一盛会!

相关实践学习
如何在云端创建MySQL数据库
开始实验后,系统会自动创建一台自建MySQL的 源数据库 ECS 实例和一台 目标数据库 RDS。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
3天前
|
存储 SQL 关系型数据库
一篇文章搞懂MySQL的分库分表,从拆分场景、目标评估、拆分方案、不停机迁移、一致性补偿等方面详细阐述MySQL数据库的分库分表方案
MySQL如何进行分库分表、数据迁移?从相关概念、使用场景、拆分方式、分表字段选择、数据一致性校验等角度阐述MySQL数据库的分库分表方案。
一篇文章搞懂MySQL的分库分表,从拆分场景、目标评估、拆分方案、不停机迁移、一致性补偿等方面详细阐述MySQL数据库的分库分表方案
|
2天前
|
存储 SQL 关系型数据库
使用MySQL Workbench进行数据库备份
【9月更文挑战第13天】以下是使用MySQL Workbench进行数据库备份的步骤:启动软件后,通过“Database”菜单中的“管理连接”选项配置并选择要备份的数据库。随后,选择“数据导出”,确认导出的数据库及格式(推荐SQL格式),设置存储路径,点击“开始导出”。完成后,可在指定路径找到备份文件,建议定期备份并存储于安全位置。
28 11
|
4天前
|
存储 负载均衡 数据库
探索后端技术:从服务器架构到数据库优化的实践之旅
在当今数字化时代,后端技术作为支撑网站和应用运行的核心,扮演着至关重要的角色。本文将带领读者深入后端技术的两大关键领域——服务器架构和数据库优化,通过实践案例揭示其背后的原理与技巧。无论是对于初学者还是经验丰富的开发者,这篇文章都将提供宝贵的见解和实用的知识,帮助读者在后端开发的道路上更进一步。
|
4天前
|
存储 缓存 关系型数据库
MySQL 视图:数据库中的灵活利器
视图是数据库中的虚拟表,由一个或多个表的数据经筛选、聚合等操作生成。它不实际存储数据,而是动态从基础表中获取。视图可简化数据访问、增强安全性、提供数据独立性、实现可重用性并提高性能,是管理数据库数据的有效工具。
|
4天前
|
SQL 关系型数据库 MySQL
MySQL技术安装配置、数据库与表的设计、数据操作解析
MySQL,作为最流行的关系型数据库管理系统之一,在WEB应用领域中占据着举足轻重的地位。本文将从MySQL的基本概念、安装配置、数据库与表的设计、数据操作解析,并通过具体的代码示例展示如何在实际项目中应用MySQL。
17 0
|
11天前
|
关系型数据库 Java MySQL
"解锁Java Web传奇之旅:从JDK1.8到Tomcat,再到MariaDB,一场跨越数据库的冒险安装盛宴,挑战你的技术极限!"
【9月更文挑战第6天】在Linux环境下安装JDK 1.8、Tomcat和MariaDB是搭建Java Web应用的关键步骤。本文详细介绍了使用apt-get安装OpenJDK 1.8、下载并配置Tomcat,以及安装和安全设置MariaDB(MySQL的开源分支)的方法。通过这些步骤,您可以快速构建一个稳定、高效的开发和部署环境,并验证各组件是否正确安装和运行。这为您的Java Web应用提供了一个坚实的基础。
26 0
|
13天前
|
SQL 安全 数据库
基于SQL Server事务日志的数据库恢复技术及实战代码详解
基于事务日志的数据库恢复技术是SQL Server中一个非常强大的功能,它能够帮助数据库管理员在数据丢失或损坏的情况下,有效地恢复数据。通过定期备份数据库和事务日志,并在需要时按照正确的步骤恢复,可以最大限度地减少数据丢失的风险。需要注意的是,恢复数据是一个需要谨慎操作的过程,建议在执行恢复操作之前,详细了解相关的操作步骤和注意事项,以确保数据的安全和完整。
27 0
|
17天前
|
前端开发 C# 设计模式
“深度剖析WPF开发中的设计模式应用:以MVVM为核心,手把手教你重构代码结构,实现软件工程的最佳实践与高效协作”
【8月更文挑战第31天】设计模式是在软件工程中解决常见问题的成熟方案。在WPF开发中,合理应用如MVC、MVVM及工厂模式等能显著提升代码质量和可维护性。本文通过具体案例,详细解析了这些模式的实际应用,特别是MVVM模式如何通过分离UI逻辑与业务逻辑,实现视图与模型的松耦合,从而优化代码结构并提高开发效率。通过示例代码展示了从模型定义、视图模型管理到视图展示的全过程,帮助读者更好地理解并应用这些模式。
30 0
|
17天前
|
存储 C# 关系型数据库
“云端融合:WPF应用无缝对接Azure与AWS——从Blob存储到RDS数据库,全面解析跨平台云服务集成的最佳实践”
【8月更文挑战第31天】本文探讨了如何将Windows Presentation Foundation(WPF)应用与Microsoft Azure和Amazon Web Services(AWS)两大主流云平台无缝集成。通过具体示例代码展示了如何利用Azure Blob Storage存储非结构化数据、Azure Cosmos DB进行分布式数据库操作;同时介绍了如何借助Amazon S3实现大规模数据存储及通过Amazon RDS简化数据库管理。这不仅提升了WPF应用的可扩展性和可用性,还降低了基础设施成本。
37 0

热门文章

最新文章