RDS通用云盘核心能力

简介: 本次实验主要体验RDS通用云盘的三项核心能力:IO加速、IO突发和数据归档。首先创建实验资源,包括RDS MySQL实例和ECS实例,耗时约5分钟。接着通过sysbench导入数据并配置安全设置。在体验阶段,我们对比了开启和关闭IO加速及IO突发功能对RDS性能的影响,观察到QPS有显著差异。最后,通过将数据从云盘迁移到OSS中,展示了冷存层的数据归档功能,并进行RDS硬盘缩容,验证了其成本优势。整个实验过程详细记录了每一步操作,确保用户能直观感受到RDS通用云盘带来的性能提升和成本优化。

内容介绍:

一、创建实验资源

二、体验RDS通用云盘的三项能力

 

本次实验体验RDS通用云盘核心能力首先介绍RDS通用云盘,RDS通用云盘是RDS推出的一种新存储类型,细分为三层,分别是缓存层、数据层和冷存层。对应三项能力,IO加速IO突发和数据归档,三项能力结合能够为RDS提供更高的性能和更低的存储成本。本次实验是通过实际操作感受RDS通用云盘带来的性能提升和成本优势。

 

一、创建实验资源

image.png

首先看页面的左边部分,常见简辑和背景知识,点开目录部了解本次实验的基本步骤,总共分为14步,前7步是准备动作,进行资源和数据的准备,8和9则是体验缓存层的IO加速,10和11是体验数据层的IO突发,12是体验冷存层的数据归档,13是进行RDS硬盘缩容。最后一步则是清理实验资源,进入下一步,前提条件是这个实验的基本要求

image.png


这一页是创建实验资源。当同意协议,并且进行了授权之后,点击开始实操,本平台将会自动创建RDS MySQL实例和ECS实例,创建资源的部分大概需要耗时五分钟左右。点击开始实验资源已经创建完成,可以在最左侧的云产品资源处看到刚刚创建的实验资源,分别是ECS、RDS,然后按照操作手册继续本次实践。


安全设置这一步骤是需要对ECS的登录密码和安全组端口进行配置,接下来按照这个进行操作ECS。右侧可以看到进入了ECS控制台页面,点击此处的重置密码,在新密码和确认密码处输入ECS密码。并且牢记。点击击确认修改,ECS密码就也同置完成。

image.png

这一步是操作RDS指创建RDS的账号和数据库,进入RDS的实例管理界面,点击账号管理,点击创建账号,输入数据库账号,选择高权限账号并设置密码,选择左侧的数据库管理,并且创建数据库,输入数据库名称,击创建。那么数据库和账号均已创建完成。

image.png

一步是需要在ECS机器上安装sysbench,是实验的安装依赖,点击远程连接ECS,此处输入设置的密码,可以看到ECS已经连接成功。再回到操作手册,此处的安装命令在ECS中进行执行,执行完成,显示sysbench已经在ECS上安装完成。

image.png

一步是通过sysbench对RDS进行数据导入,是数据准备工作,依次执行这些骤,这里sysbench的脚本中需要替换host user password和db name,首先host需要在RDS数据库链接页面找到内网链接地址,复制粘贴到对应位置。user就是RDS设置的用户名,password则是对应的密码。db name是创建的数据库名。保存并执行,查看执行命令。看到目前数据正在导入过程中,数据导入过程大概需要20分钟左右。

image.png

image.png

期间可以观察RDS的监控与报警页面,查看这里的存储空间指标,可以选这次实验所关注的指标。这里需要等待数据导入完成。

image.png  

 

二、体验RDS通用云盘的三项能力

数据已经导入完成,下一步体验RDS通用云盘的三项能力

1、体验IO加速功能

IO加速是在同样的压测脚本下,对比开关IO加速两种场景下的RDS实例的QPS,实例在初始化时已经默认打开了IO加速。可以在云数据库RDS控制台基本信息页面,通用云盘开关设置确认IO加速已打开

image.png

在ECS服务器上对RDS进行压测,压测的脚本采用128并发,开始执行压测。可以看到压测压力已经开始。

image.png

压测期间,可以在RDS控制台监控与报警页面选择近15分钟查看LPS和QPS。

image.png

压测结束,从压测报告里看到三分钟内它的平均QPS是28000多,这是打开IO加速的情况下。 image.png

下一步实验关闭IO加速,再用同样的脚本对RDS进行性能测试,关闭方式是在RDS控制台基本信息栏,在通用云盘开关选择关闭IO加速开关,IO加速关闭过程中会进行闪断,大概需要五分钟左右,目前IO加速关闭已经在运行,等待IO加速关闭。

image.png

现在IO加速已关闭。回到ECS服务器上继续用同样脚本对RDS进行压测。压测开启。看到QPS已经相比于之前有一些下降,等待压测结束。压测结束压测报告里平均QPS是8800多,相比打开IO加速降低不少。IO加速的体验已经完成

image.png

2、体验IO突发功能

下一步体验IO突发对RDS实的影响。在执行同样的压测脚本下。对开启IO突发和关闭IO突发的RDS实力进行QPS和IOPS的对比。首先打开IO突发,在通用云盘开关设置这里点击IO突发开关按钮,选择确定IO突发的打开并不需要闪断。预估需要十秒左右,IO突发打开

image.png

回到ECS ,对 RDS进行压测。观察此时的QPS已经明显的提升。等待压测的结束,压测报告,平均每秒的QPS为1000多

image.png


下一步关闭IO突发RDS实例进行压测,回到RDS控制台。在通用云盘开关关闭IO突发关闭IO突发不需要闪断,预估需要十秒钟左右IO突发已经关闭,到ECSRDS进行压测观察压测结果QPS明显下降,等待压测结束。压测报告,平均每秒的QPS12000多,相比于开启IO突发时QPS有明显的下降。至此,以RDS通用云盘实力性能提升的体验,就是IO加速和IO突发两个功能体验结束。

image.png

 

3、体验RDS成本优势及冷存层的数据归档功能

接下来体验RDS的成本优势及冷存层的数据归档功能。需要通过云产品资源页面登录云数据库RDS,输入最开始注册的RDS的账号和密码。测试连接,连接成功登录进去。

image.png

选择最左侧的数据库实例,选择创建的数据库,看到最开始准备的10张表,这10张表每个表有10G数据,总共是100G数据。

image.png


回到操作手册,需要将这10张表从云盘中转移到OSS中,需要执行以下的DDL命令,table_name即输入对应的表名,开始执行,等待执行结束。因为一张表的大小是10G,而OSS的带宽大约在100mb/s左右,预估消耗两分钟左右。目前看已经执行完成。

image.png


可以再多做一张表,将第二张表也导入到OSS中。第二张表也已经到OSS中。

image.png


回到RDS控制台观察它的监控与报警,先收起操作手册,时间选择近15分钟更便于观察,可以看到这里有明显的下降,user_data_size就是用户数据从120G降到了109G,又降到97G。MySQL存储空间使用量表示云盘的使用量,它下降的时间段就是执行DDL的时候。说明数据已经从云盘上转移到了OSS中

image.png

回到左侧菜单满点击冷存管理,看到这里就是OSS中的数据。刚刚转过来的两张表。

image.png


回到实验手册,这一步是RDS云盘缩容,可以根据手册进行操作,相对比较简单。

image.png

最后一步是清理实验资源,结束实验。

 

 

 

相关文章
|
2天前
|
调度 云计算 芯片
云超算技术跃进,阿里云牵头制定我国首个云超算国家标准
近日,由阿里云联合中国电子技术标准化研究院主导制定的首个云超算国家标准已完成报批,不久后将正式批准发布。标准规定了云超算服务涉及的云计算基础资源、资源管理、运行和调度等方面的技术要求,为云超算服务产品的设计、实现、应用和选型提供指导,为云超算在HPC应用和用户的大范围采用奠定了基础。
|
9天前
|
存储 运维 安全
云上金融量化策略回测方案与最佳实践
2024年11月29日,阿里云在上海举办金融量化策略回测Workshop,汇聚多位行业专家,围绕量化投资的最佳实践、数据隐私安全、量化策略回测方案等议题进行深入探讨。活动特别设计了动手实践环节,帮助参会者亲身体验阿里云产品功能,涵盖EHPC量化回测和Argo Workflows量化回测两大主题,旨在提升量化投研效率与安全性。
云上金融量化策略回测方案与最佳实践
|
11天前
|
人工智能 自然语言处理 前端开发
从0开始打造一款APP:前端+搭建本机服务,定制暖冬卫衣先到先得
通义灵码携手科技博主@玺哥超carry 打造全网第一个完整的、面向普通人的自然语言编程教程。完全使用 AI,再配合简单易懂的方法,只要你会打字,就能真正做出一个完整的应用。
8873 20
|
15天前
|
Cloud Native Apache 流计算
资料合集|Flink Forward Asia 2024 上海站
Apache Flink 年度技术盛会聚焦“回顾过去,展望未来”,涵盖流式湖仓、流批一体、Data+AI 等八大核心议题,近百家厂商参与,深入探讨前沿技术发展。小松鼠为大家整理了 FFA 2024 演讲 PPT ,可在线阅读和下载。
4769 12
资料合集|Flink Forward Asia 2024 上海站
|
15天前
|
自然语言处理 数据可视化 API
Qwen系列模型+GraphRAG/LightRAG/Kotaemon从0开始构建中医方剂大模型知识图谱问答
本文详细记录了作者在短时间内尝试构建中医药知识图谱的过程,涵盖了GraphRAG、LightRAG和Kotaemon三种图RAG架构的对比与应用。通过实际操作,作者不仅展示了如何利用这些工具构建知识图谱,还指出了每种工具的优势和局限性。尽管初步构建的知识图谱在数据处理、实体识别和关系抽取等方面存在不足,但为后续的优化和改进提供了宝贵的经验和方向。此外,文章强调了知识图谱构建不仅仅是技术问题,还需要深入整合领域知识和满足用户需求,体现了跨学科合作的重要性。
|
23天前
|
人工智能 自动驾驶 大数据
预告 | 阿里云邀您参加2024中国生成式AI大会上海站,马上报名
大会以“智能跃进 创造无限”为主题,设置主会场峰会、分会场研讨会及展览区,聚焦大模型、AI Infra等热点议题。阿里云智算集群产品解决方案负责人丛培岩将出席并发表《高性能智算集群设计思考与实践》主题演讲。观众报名现已开放。
|
11天前
|
人工智能 容器
三句话开发一个刮刮乐小游戏!暖ta一整个冬天!
本文介绍了如何利用千问开发一款情侣刮刮乐小游戏,通过三步简单指令实现从单个功能到整体框架,再到多端优化的过程,旨在为生活增添乐趣,促进情感交流。在线体验地址已提供,鼓励读者动手尝试,探索编程与AI结合的无限可能。
三句话开发一个刮刮乐小游戏!暖ta一整个冬天!
|
10天前
|
消息中间件 人工智能 运维
12月更文特别场——寻找用云高手,分享云&AI实践
我们寻找你,用云高手,欢迎分享你的真知灼见!
876 58

热门文章

最新文章