sysbench 0.5 性能测试工具使用手册

本文涉及的产品
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
性能测试 PTS,5000VUM额度
简介:
1. sysbench 介绍
  sysbench是一个模块化的、跨平台、多线程基准 测试工具,主要用于评估测试各种不同系统参数 下的 数据库负载情况。关于这个项目的详细介绍请看:http://sysbench.sourceforge.net。
  它主要包括以下几种方式的测试:
  cpu性能
  磁盘io性能
  调度程序性能
  内存分配及传输速度
  POSIX线程性能
  数据库性能(OLTP基准测试)
  目前sysbench主要支持 MySQL,Pgsql和 Oracle这3种数据库。
   2. 安装sysbench
  基于Debain的 操作系统,可以直接安装:
  sudo apt-get install sysbench
  也可以下载源码,然后自己编译安装。
  项目主页:http://sysbench.sourceforge.net/
  下载地址:http://sourceforge.net/projects/sysbench
  文档地址:http://sysbench.sourceforge.net/docs
   3. 开始测试
  3.1 CPU性能测试
  根据官网的介绍可知:CPU测试使用64位整数,测试计算素数直到某个最大值所需要的时间。
  sysbench --test=cpu --cpu-max-prime=20000 run
  输出如下:
Maximum prime number checked in CPU  test: 200000
Test execution summary:
total time:                          286.5703s
total number of events:              10000
total time taken by event execution: 285197.4463
per-request statistics:
min:                                109.67ms
avg:                              28519.74ms
max:                              36760.02ms
approx.  95 percentile:           31751.56ms
Threads fairness:
events (avg/stddev):           9.7656/0.81
execution time (avg/stddev):   278.5131/6.05
  我们只需要关心测试的总时间(total time)即可。
  CPU性能测试有一个需要注意的地方,上面的测试只使用了一个线程,如果在两个cpu processor不同的电脑上做比较,这是不公平的。公平的做法是指定合理的线程数,如下所示:
  sysbench --test=cpu --num-threads=`grep "processor" /proc/cpuinfo | wc -l` \
  --cpu-max-prime=200000 run
  补充知识:
  查看CPU核数的方法
  查看物理cpu个数
  grep "physical id" /proc/cpuinfo | sort -u | wc -l
  查看核心数量
  grep "core id" /proc/cpuinfo | sort -u | wc -l
  查看线程数量
  grep "processor" /proc/cpuinfo | sort -u | wc -l
  在sysbench的测试中,--num-threads取值为"线程数量"即可,再大的值没有什么意义,对测试结果也没有什么影响。
   3.2 线程(thread)测试
  测试线程调度器的性能。对于高负载情况下测试线程调度器的行为非常有用。
  sysbench --test=threads --num-threads=64 run
  下面是输出结果:
Number of threads: 64
Doing thread subsystem performance test
Thread yields per test: 1000 Locks used: 8
Threads started!
Done.
Test execution summary:
total time: 4.5845s
total number of events: 10000
total time taken by event execution: 291.9995
per-request statistics:
min: 0.76ms
avg: 29.20ms
max: 152.71ms
approx. 95 percentile: 71.11ms
Threads fairness:
events (avg/stddev): 156.2500/5.81
execution time (avg/stddev): 4.5625/0.02
  说实话,我也不怎么会分析这个测试结果,网上搜了半天也没有搜到,几乎所有的资料都是简单的罗列出测试结果, 也不告诉我们应该怎么分析,实在是太不照顾新手了。 我自己是通过(total time:)判断线程调度的性能的,下面是我在服务器上运行这个测试的输出:
Number of threads: 64
Doing thread subsystem performance test
Thread yields per test: 1000 Locks used: 8
Threads started!
Done.
Test execution summary:
total time: 2.4829s
total number of events: 10000
total time taken by event execution: 157.3468
per-request statistics:
min: 0.21ms
avg: 15.73ms
max: 166.69ms
approx. 95 percentile: 119.14ms
Threads fairness:
events (avg/stddev): 156.2500/22.25
execution time (avg/stddev): 2.4585/0.02
  可以看到total time 比在我自己电脑上少了一半,服务器的线程调度肯定比普通电脑快多了。

 3.3 互斥锁(mutex)
  测试互斥锁的性能,方式是模拟所有线程在同一时刻并发运行,并都短暂请求互斥锁。
sysbench --test=mutex --num-threads=16 --mutex-num=2048 \
--mutex-locks=1000000 --mutex-loops=5000 run
输出结果如下:

Number of threads: 16
Doing mutex performance test
Threads started!
Done.
Test execution summary:
total time: 3.6123s
total number of events: 16
total time taken by event execution: 57.6636
per-request statistics:
min: 3580.79ms
avg: 3603.98ms
max: 3610.94ms
approx. 95 percentile: 10000000.00ms
Threads fairness:
events (avg/stddev): 1.0000/0.00
execution time (avg/stddev): 3.6040/0.01
  为了不误导别人,我就不解释各参数的含义了,可以请参考这里。
   3.4 内存测试
  内存测试测试了内存的连续读写性能。
  sysbench --test=memory --memory-block-size=8K --memory-total-size=2G  --num-threads=16 run
  上面这条语句指定了整个测试过程中,传输2G的数据量,每个block的大小为8K(大写的K)。 测试结果如下所示,我们最关心的是吞吐量(8030.45MB/sec),和后面的磁盘io 测试结果比较可知,内存的连续读写比磁盘的连续读写快十几倍。
Number of threads: 16
Doing memory operations speed test
Memory block size: 8K
Memory transfer size: 2048M
Memory operations type: write
Memory scope type: global
Threads started!
Done.
Operations performed: 262144 (1027897.89 ops/sec)
2048.00 MB transferred (8030.45 MB/sec)
Test execution summary:
total time: 0.2550s
total number of events: 262144
total time taken by event execution: 3.1911
per-request statistics:
min: 0.00ms
avg: 0.01ms
max: 29.55ms
approx. 95 percentile: 0.00ms
Threads fairness:
events (avg/stddev): 16384.0000/926.14
execution time (avg/stddev): 0.1994/0.02
   3.5 文件IO基准测试
  文件IO(fileio)基准测试可以测试系统在不同IO负载下的性能。这对于比较不同的硬盘驱动器,不同的RAID 卡,不同的RAID 模式,都很有帮助。可以根据测试结果调整IO子系统。文件IO基准测试模拟了很多InnoDB 的IO特性。
  测试的第一步是准备(Prepare)阶段,生成测试用到的数据文件,生成的数据文件至少要比内存大。 如果文件中的数据能完全放入内存中,则操作系统 缓存大部分的数据,导致测试结果无法体现IO密集型的工作负载。首先通过下面的命令创建一个数据集:
  sysbench --test=fileio --file-total-size=40G prepare
  这个命令会在当前工作目录下创建测试文件,后续的运行(run)阶段将通过读写这些文件进行测试。 第二步就是运行(run)阶段,针对不同的IO 类型有不同的测试选项:
  seqwr 顺序写入
  seqrewr 顺序重写
  seqrd 顺序读取
  rndrd 随机读取
  rndwr 随机写入
  rndrw 混合随机读/写
  下面的命令运行文件I/O混合随机读/写基准测试:
  sysbench --test=fileio --file-total-size=40G --file-test-mode=rndrw\
  --init-rng=on --max-time=300 --max-requests=0 run

  simple 与 --oltp-read-only 的区别
  simple模式和在complex模式下开启read-only选项都只包含select语句。但是 simple 模式只包含最简单的select语句,相反地,complex 模式中,如果我们开启read-only 选项,即--oltp-read-only=on,则会包含复杂的SQL语句。如:
  SELECT SUM(K) FROM sbtest WHERE id BETWEEN N and M
  SELECT DISTINCT c FROM sbtest WHERE id BETWEEN N and M ORDER BY c
   测试自有的存储引擎
  测试自有的存储引擎需要告诉sysbench,这个存储引擎是否支持事务。
  如下所示:
  准备
  sysbench --test=oltp --mysql-table-engine=tnt --mysql-engine-trx=yes \
  --oltp-table-size=100000 --mysql-user=root --mysql-db=test \
  --mysql-socket=/data/ntse/lmx/sysbench/var/mysqld.sock \
  prepare
  测试
  sysbench --test=oltp --mysql-table-engine=tnt --mysql-engine-trx=yes \
  --oltp-table-size=100000 --mysql-user=root --mysql-db=test \
  --mysql-socket=/data/ntse/lmx/sysbench/var/mysqld.sock \
  --oltp-test-mode=complex --num-threads=16 --max-time=720 \
  --max-requests=0 run
  清除
  sysbench --test=oltp --mysql-table-engine=tnt --mysql-engine-trx=yes \
  --oltp-table-size=100000 --mysql-user=root --mysql-db=test \
  --mysql-socket=/data/ntse/lmx/sysbench/var/mysqld.sock \
  clean
   4. sysbench 0.5
  4.1 下载安装
  下载
  bzr branch lp:sysbench
  安装依赖库
  sudo apt-get installlibtool
  安装
  tar -zxvf sysbench.tar.gz
  cd sysbench
  ./autogen.sh
  ./configure
  make
  #make install #可选
  开始测试
cd sysbench/sysbench
./sysbench --test=./tests/db/oltp.lua
--debug=yes \
--mysql-host=localhost \
--mysql-socket=PATH/mysqld.sock \
--mysql-db=test \
--mysql-table-engine=innodb \
--mysql-engine-trx=yes \
--mysql-user=root \
--max-requests=0 \
--max-time=60 \
--num-threads=16 \
--oltp-table-size=100000 \
--report-interval=10 [prepare|run|cleanup]
  解释
  --debug 参数用以打印更加详细的调试信息
  --report-interval 用以打印中间结果
  除了测试oltp,sysbench 0.5还可以进行插入操作的性能测试(insert.lua),选择操作的性能测试(select.lua)等。   


最新内容请见作者的GitHub页:http://qaseven.github.io/
   
相关实践学习
通过性能测试PTS对云服务器ECS进行规格选择与性能压测
本文为您介绍如何利用性能测试PTS对云服务器ECS进行规格选择与性能压测。
目录
相关文章
|
30天前
|
Java 测试技术 数据安全/隐私保护
软件测试中的自动化策略与工具应用
在软件开发的快速迭代中,自动化测试以其高效、稳定的特点成为了质量保证的重要手段。本文将深入探讨自动化测试的核心概念、常见工具的应用,以及如何设计有效的自动化测试策略,旨在为读者提供一套完整的自动化测试解决方案,帮助团队提升测试效率和软件质量。
|
23天前
|
Web App开发 IDE 测试技术
Selenium:强大的 Web 自动化测试工具
Selenium 是一款强大的 Web 自动化测试工具,包括 Selenium IDE、WebDriver 和 Grid 三大组件,支持多种编程语言和跨平台操作。它能有效提高测试效率,解决跨浏览器兼容性问题,进行性能测试和数据驱动测试,尽管存在学习曲线较陡、不稳定等缺点,但其优势明显,是自动化测试领域的首选工具。
131 17
Selenium:强大的 Web 自动化测试工具
|
2月前
|
机器学习/深度学习 人工智能 算法
BALROG:基准测试工具,用于评估 LLMs 和 VLMs 在复杂动态环境中的推理能力
BALROG 是一款用于评估大型语言模型(LLMs)和视觉语言模型(VLMs)在复杂动态环境中推理能力的基准测试工具。它通过一系列挑战性的游戏环境,如 NetHack,测试模型的规划、空间推理和探索能力。BALROG 提供了一个开放且细粒度的评估框架,推动了自主代理研究的进展。
44 3
BALROG:基准测试工具,用于评估 LLMs 和 VLMs 在复杂动态环境中的推理能力
|
2月前
|
监控 测试技术 开发工具
移动端性能测试工具
移动端性能测试工具
53 2
|
2月前
|
安全 前端开发 测试技术
如何选择合适的自动化安全测试工具
选择合适的自动化安全测试工具需考虑多个因素,包括项目需求、测试目标、系统类型和技术栈,工具的功能特性、市场评价、成本和许可,以及集成性、误报率、社区支持、易用性和安全性。综合评估这些因素,可确保所选工具满足项目需求和团队能力。
|
2月前
|
安全 网络协议 关系型数据库
最好用的17个渗透测试工具
渗透测试是安全人员为防止恶意黑客利用系统漏洞而进行的操作。本文介绍了17款业内常用的渗透测试工具,涵盖网络发现、无线评估、Web应用测试、SQL注入等多个领域,包括Nmap、Aircrack-ng、Burp Suite、OWASP ZAP等,既有免费开源工具,也有付费专业软件,适用于不同需求的安全专家。
208 2
|
2月前
|
监控 网络协议 Java
一些适合性能测试脚本编写和维护的工具
一些适合性能测试脚本编写和维护的工具
|
2月前
|
关系型数据库 MySQL 测试技术
【赵渝强老师】MySQL的基准测试与sysbench
本文介绍了MySQL数据库的基准测试及其重要性,并详细讲解了如何使用sysbench工具进行测试。内容涵盖sysbench的安装、基本使用方法,以及具体测试MySQL数据库的步骤,包括创建测试数据库、准备测试数据、执行测试和清理测试数据。通过这些步骤,可以帮助读者掌握如何有效地评估MySQL数据库的性能。
|
2月前
|
Web App开发 定位技术 iOS开发
Playwright 是一个强大的工具,用于在各种浏览器上测试应用,并模拟真实设备如手机和平板。通过配置 `playwright.devices`,可以轻松模拟不同设备的用户代理、屏幕尺寸、视口等特性。此外,Playwright 还支持模拟地理位置、区域设置、时区、权限(如通知)和配色方案,使测试更加全面和真实。例如,可以在配置文件中设置全局的区域设置和时区,然后在特定测试中进行覆盖。同时,还可以动态更改地理位置和媒体类型,以适应不同的测试需求。
Playwright 是一个强大的工具,用于在各种浏览器上测试应用,并模拟真实设备如手机和平板。通过配置 `playwright.devices`,可以轻松模拟不同设备的用户代理、屏幕尺寸、视口等特性。此外,Playwright 还支持模拟地理位置、区域设置、时区、权限(如通知)和配色方案,使测试更加全面和真实。例如,可以在配置文件中设置全局的区域设置和时区,然后在特定测试中进行覆盖。同时,还可以动态更改地理位置和媒体类型,以适应不同的测试需求。
105 1
|
3月前
|
jenkins 测试技术 持续交付
提升软件测试效率的实用技巧与工具
【10月更文挑战第12天】 本文将深入探讨如何通过优化测试流程、引入自动化工具和持续集成等策略,来显著提高软件测试的效率。我们将分享一些实用的技巧和工具,帮助测试人员更高效地发现和定位问题,确保软件质量。
75 2