阿里云原生数据库POLARDB压力测试报告-阿里云开发者社区

开发者社区> 桐碧2018> 正文

阿里云原生数据库POLARDB压力测试报告

简介: POLARDB是阿里云ApsaraDB数据库团队研发的基于云计算架构的下一代关系型数据库,其最大的特色是计算节点(主要做SQL解析以及存储引擎计算的服务器)与存储节点(主要做数据块存储,数据库快照的服务器)分离,其次,与传统的云数据库一个实例一份数据拷贝不同,同一个实例的所有节点(包括读写节点和只读.
+关注继续查看

POLARDB介绍

POLARDB是阿里云ApsaraDB数据库团队研发的基于云计算架构的下一代关系型数据库,其最大的特色是计算节点(主要做SQL解析以及存储引擎计算的服务器)与存储节点(主要做数据块存储,数据库快照的服务器)分离,其次,与传统的云数据库一个实例一份数据拷贝不同,同一个实例的所有节点(包括读写节点和只读节点)都访问存储节点上的同一份数据,最后,借助优秀的RDMA网络以及最新的块存储技术,PolarDB的数据备份耗时可以做到秒级别(备份时间与底层数据量无关),这三点相结合,我们可以推断出POLARDB不但满足了公有云计算环境下用户业务快速弹性扩展的刚性需求(只读实例扩展时间与底层数据量无关),同时也满足了互联网环境下用户对数据库服务器高可用的需求(服务器宕机后无需搬运数据重启进程即可服务)。

以下测试来自于袋鼠云技术部。

POLARDB架构

POLARDB_

一写多读

POLARDB采用分布式集群架构,一个集群包含一个主实例和至少一个只读实例(暂时仅支持一个,用于保障高可用)。主实例处理读写请求,只读实例仅处理读请求。主实例和只读实例之间采用Active-Active的Failover方式,提供数据库的高可用服务。

计算与存储分离

POLARDB采用计算与存储分离的设计理念,满足公有云计算环境下用户业务弹性扩展的刚性需求。数据库的计算节点(DB Server)仅存储元数据,而将数据文件、Redo Log等存储于远端的存储节点(Chunk Server)。各计算节点之间仅需同步Redo Log相关的元数据信息,极大降低了主实例和只读实例间的延迟,而且在主实例故障时,只读实例可以快速切换为主服务器。

读写分离

读写分离数据库接入功能,是POLARDB集群默认免费提供的一个透明、高可用、自适应的负载均衡能力。通过读写分离地址,SQL请求自动转发到POLARDB集群的各个实例,提供聚合、高吞吐的并发SQL处理能力。

高速链路互联

数据库的计算节点和存储节点之间采用高速网络互联,并通过RDMA协议进行数据传输,使得I/O性能不再成为瓶颈。

共享分布式存储

多个计算节点共享一份数据,而不是每个计算节点都存储一份数据,极大降低了用户的存储成本。基于全新打造的分布式块设备和文件系统,存储容量可以在线平滑扩展,不会受到单机服务器配置的影响,可应对上百TB级别的数据规模。

数据多副本、Parallel-Raft协议

数据库存储节点的数据采用多副本形式,确保数据的可靠性,并通过Parallel-Raft协议保证数据的一致性。
优点:
备份速度快,增加只读节点速度快。
只读实例无延迟。

参数
POLARDB默认关闭了doublewrite buffer,关闭了binlog。
image

压测方案

使用sysbench oltp标准压测程序分别压测读、写两种场景的性能。

环境准备
PolarDB: 8C64G
ECS:2C2G, CentOS 2.7(三台)
Sysbench 0.5

sysbench安装
yum -y install mysql-devel 

yum -y install automake 

yum -y install libtool 

wget https://github.com/akopytov/sysbench/archive/0.5.zip
unzip 0.5.zip
cd sysbench-0.5
./autogen.sh
./configure
make
cd sysbench

压测步骤

准备数据
$sysbench_path/sysbench --test=$sysbench_path/tests/db/oltp.lua --mysql-host=$ip --mysql-port=3306 --mysql-user=$mysql_user --mysql-password=$mysql_password --mysql-db=$table_name --mysql-table-engine=innodb --oltp-table-size=$[$table_size/10] --oltp-tables-count=$oltp_tables_count -db-driver=mysql prepare

注意事项:
1.如果测试POLARDB不能使用外网连接串(时延高难以达到最佳性能)使用非VPC的内网连接串要达到最佳的性能需要使用3~4台ECS同时进行压测才能发挥Polardb最佳性能,使用VPC网络单台ECS压测就能达到POLARDB最佳的性能(建议使用VPC连接串)

2.POLARDB的特点是读写分离,sysbench测试时需要单独测试读和写,避免使用读写混合sysbench命令测试,这样能最大的发挥POLARDB的性能优势,详细测试命令如下:

压测写性能

使用sysbench准备数据,单表1000万数据,总共100个表,每个表的空间大约2G。
$sysbenchpath/sysbench --test=$sysbenchpath/tests/db/oltp.lua --mysql-host=$ip --oltp-tables-count=$oltp_tables_count --mysql-user=$mysql_user --mysql-password=$mysql_password --mysql-port=3306 --db-driver=mysql --oltp-table-size=$[$table_size/10] --mysql-db=$table_name --max-requests=$[$table_size/10] --max-time=$max_time --oltp_simple_ranges=0 --oltp-distinct-ranges=0 --oltp-sum-ranges=0 --oltporder-ranges=0 --oltp-point-selects=0 --num-threads=$threads --randtype=uniform run

压测读性能

压测选用5个表,每个表1000万数据,总共1亿条数据进行压测。分表采用1,2,4,8,16,32个并发测试写入性能。
$sysbenchpath/sysbench --test=$sysbenchpath/tests/db/oltp.lua --mysql-host=$ip --oltp-tables-count=$oltp_tables_count --mysql-user=$mysql_user --mysql-password=$mysql_password --mysql-port=3306 --db-driver=mysql --oltp-table-size=$[$table_size/10] --mysql-db=$table_name --max-requests=$[$table_size/10] --oltp_simple_ranges=0 --oltp-distinct-ranges=0 --oltp-sum-ranges=0 --oltp-order-ranges=0 --max-time=$max_time --oltp-read-only=on --num-threads=$threads run

注:

  $sysbench_path:sysbench源码位置
$ip数据库的IP地址者公网连接串
$mysql_user 数据库用户名
$mysql_password 数据库密码
$table_name 数据库的名字
$oltp_tables_count 数据库表的数量
$table_size 数据库表的大小

压测结果

读取性能压测结果

在32个并发的时候,取得了最好的读区性能,读取QPS为46813.94,平均SQL响应时间2.05毫秒。
image
bbbbf5ce278d2494f58716d1545be7bec97b6073

写性能压测结果
32个并发的时候,取得了最好的写入性能,写QPS为156273.72,平均事物响应时间5.09毫秒。
image
f3ed45882e5e9b7ee339babfceaad2a53f87c0b0

看文福利!每天可抽奖,代金券,天猫精灵等奖品等你拿!点击进入抽奖页面

版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。

相关文章
使用swingbench实现oracle数据库压力测试
    即将上线的数据库如何来评估其性能呢,swingbench是除了Benchmark Factory for Databases的不二之选,可以用短小精悍来形容,而且完全免费,也不用成天到晚google注册码,还等什么呢,赶紧来瞧瞧...... 一、swingbench介绍    是JAVA程序,当前分为两个版本,一个是2.3,一个是2.4,支持windons/linux/unix平台,测试了一下win7 64平台,运行不太稳定   支持oracle 单实例以及Oracle RAC,支持Oracle 10g,11g。
1572 0
阿里云服务器怎么设置密码?怎么停机?怎么重启服务器?
如果在创建实例时没有设置密码,或者密码丢失,您可以在控制台上重新设置实例的登录密码。本文仅描述如何在 ECS 管理控制台上修改实例登录密码。
10014 0
阿里云全面布局云原生数据库产品体系,点亮企业数据上云之路
阿里云数据库正式全面升级到云原生数据库时代
1016 0
阿里云开源PolarDB数据库,与社区共建云原生分布式数据库生态
5月29日,阿里云开发者大会上,阿里巴巴宣布开源云原生数据库能力,对外开放关系型数据库PolarDB for PostgreSQL 源代码,服务百万开发者,与社区开发者一起共建云原生分布式数据库生态。“我们希望将阿里云在云原生分布式数据库技术上积累的丰富经验,通过标准技术组件和系统的方式开放出来,共建开源数据库生态。”阿里云智能数据库产品事业部负责人李飞飞表示。
18143 0
云原生数据库 2.0:一站式全链路数据管理与服务
5月29日,阿里云开发者大会上,阿里云数据库宣布「云原生数据库 2.0:一站式全链路数据管理与服务」的全新品牌理念及开源云原生数据库能力,首次从客户场景视角提出了一站式在线数据管理平台的理念。
16610 0
阿里云服务器如何登录?阿里云服务器的三种登录方法
购买阿里云ECS云服务器后如何登录?场景不同,阿里云优惠总结大概有三种登录方式: 登录到ECS云服务器控制台 在ECS云服务器控制台用户可以更改密码、更换系.
13814 0
DataFlux:实时数据应用的新选择——企业级云原生数据库介绍
DataFlux:实时数据应用的新选择——企业级云原生数据库介绍
335 0
阿里云李飞飞:All in Cloud时代,云原生数据库优势明显
5月8日,在DTCC 2019(第十届中国数据库技术大会)上,阿里云智能数据库产品线总负责人李飞飞演讲指出,All in Cloud时代,云原生数据库因其突出优势,应用趋势不断上升。
8723 0
重磅 | 激活数据价值 阿里云推出云原生数据库备份DBS新版本
11月18日,阿里云宣布推出云原生数据库备份DBS。DBS是阿里云提供的低成本、高可靠的云原生数据库备份平台。DBS提供无限容量的备份存储、秒级应急恢复和恢复演练,并借助秒级沙箱实例和备份数据查询激活冷数据。DBS支持MySQL、SQL Server、Oracle等近10种数据库,支持文件、日志、数据库等全站备份,支持本地数据中心、其他云厂商、ECS数据库及RDS数据库等环境统一备份,是客户首选的企业级混合云统一备份平台。
2531 0
+关注
桐碧2018
数据库技术品牌和运营
45
文章
0
问答
来源圈子
更多
阿里云数据库:帮用户承担一切数据库风险,给您何止是安心!支持关系型数据库:MySQL、SQL Server、PostgreSQL、PPAS(完美兼容Oracle)、自研PB级数据存储的分布式数据库Petadata、自研金融级云数据库OceanBase支持NoSQL数据库:MongoDB、Redis、Memcache更有褚霸、丁奇、德哥、彭立勋、玄惭、叶翔等顶尖数据库专家服务。
+ 订阅
文章排行榜
最热
最新
相关电子书
更多
《2021云上架构与运维峰会演讲合集》
立即下载
《零基础CSS入门教程》
立即下载
《零基础HTML入门教程》
立即下载