一款开源的自动化测试工具curl-loader

简介:

最近发现一款新的性能测试工具,觉得对其进行一番研究和学习,下面是我从各个网站收集到的资料:
  第一章:安装介绍
  本期将推开性能测试工具LoadRunner,去研究一款开源性能测试工具Curl-Loader,关于两者的优劣我也不大清楚,不过对于Lr的强大,相信大家是领教多了,而理解性能测试的原理的话,对于Curl-Loader就可以溢于言表了。前者可以做录制,且业务逻辑复杂的流程;而后者更倾向于压力面的扩展,对于虚拟用户数的个数在单个机器上可以上到10000个以上。
  由于该工具运行于Linux平台,所以安装过程还是比较麻烦的,我们来看看Curl-Loaderde的安装如下:
  1、官方下载地址如下所示:
  http://sourceforge.net/projects/curl-loader/files/
  2、在官方网站上查看readme文档,以及FAST START文档,根据文档提示在安装之前先首先要了解系统是否具备了安装Curl-Loader的相关包,如下所示:

  openssl以及开发包这两个包是必须要安装的,一句官方提供的文档。
  3、具体安装方法如下:
$tar zxfv curl-loader-.tar.gz
$cd curl-loader-
$make
  安装完成之后在主目录中会生成curl-loader可执行文件,主要通过该命令来执行压力测试。
  4、根据FAST START文档的说明,执行压力测试的过程可以通过conf-examples目录下的示例来解读,这里我们以10k.conf为例,配置如下:

GENERAL SECTION

BATCH_NAME= 10K //这里是配置测试对象的名称
CLIENTS_NUM_MAX=10000 //这里是配置最大虚拟用户数
CLIENTS_NUM_START=100 //这里是配置初始化并发虚拟用户数
CLIENTS_RAMPUP_INC=50 //这里是配置每次加载用户数
INTERFACE =eth0
NETMASK=16 //子网掩码位数
IP_ADDR_MIN= 192.168.1.1 //起始ip地址
IP_ADDR_MAX= 192.168.53.255 //最后的ip地址范围
CYCLES_NUM= -1
URLS_NUM= 1

URL SECTION

URL=http://localhost/index.html //配置URL地址

URL=http://localhost/ACE-INSTALL.html

URL_SHORT_NAME="local-index"
REQUEST_TYPE=GET
TIMER_URL_COMPLETION = 5000 # In msec. When positive, Now it is enforced by cancelling url fetch on timeout
TIMER_AFTER_URL_SLEEP =20
  配置完成之后就在命令下执行命令:./curl-loader -f 10K.conf,然后就开始执行压力测试。
  通过以上这个示例配置文件,可以清楚的理解这个就类似于LoadRunner中的场景设置页面,其实原理都一样。

 5、测试结果,在执行以上测试指令后,在命令窗口中就显示如下所示,具体的动态测试数据如下:

  在执行压力的时候显示如上页面,具体的参数就不一一详细介绍了,具体请参考官方FAQ文档,因为我也没有读完,只了解大概。
  在测试结束之后将会生成一系列的日志文件,详细测试信息还可以查看日志文件。
  第二章:学习视频
  1)开源性能测试工具Curl-Loader快速实战 - 1
  2)开源性能测试工具Curl-Loader快速实战 - 2
  3)开源性能测试工具Curl-Loader快速实战 - 3
  4)开源性能测试工具Curl-Loader快速实战 - 4
  开源性能测试工具Curl-Loader快速实战 (1)
  在线观看地址:http://www.boobooke.com/v/bbk1808
  下载地址:http://www.boobooke.com/v/bbk1808.zip
  开源性能测试工具Curl-Loader快速实战 (2)
  在线观看地址:http://www.boobooke.com/v/bbk1809
  下载地址:http://www.boobooke.com/v/bbk1809.zip
  开源性能测试工具Curl-Loader快速实战 (3)
  在线观看地址:http://www.boobooke.com/v/bbk1835
  下载地址:http://www.boobooke.com/v/bbk1835.zip
  开源性能测试工具Curl-Loader快速实战 (4)
  在线观看地址:http://www.boobooke.com/v/bbk1836
  curl-loader配置文件说明:
01

GENERAL SECTION

02
BATCH_NAME= 10K-clients #批处理名称
03
CLIENTS_NUM_MAX=10000 #虚拟客户端最大数量
04
CLIENTS_NUM_START=100 #虚拟客户端初始数量
05
CLIENTS_RAMPUP_INC=50 #虚拟客户端一次递增的数量
06
INTERFACE =eth0 #选择使工作的网卡
07
NETMASK=255.255.0.0 #子网掩码
08
IP_ADDR_MIN= 192.168.1.1 #模拟的ip开始地址段
09
IP_ADDR_MAX= 192.168.53.255 #模拟的ip结束地址段
10
CYCLES_NUM= -1 #每个客户执行的周期数不限
11
URLS_NUM= 1 #每个客户得到单个url
12
13

URLs SECTION

14
15
URL=http://localhost/index.html #待测目标的url
16
URL_SHORT_NAME="local-index" #这个名字是url的代名词将被出现在负载开始时的
17
REQUEST_TYPE=GET #请求类型
18
TIMER_URL_COMPLETION = 0 #url将使用http GET方法被提取且在时间上不受限制
19
TIMER_AFTER_URL_SLEEP = 0 #在完成一个url请求后进行下一个url请求的协议重定向的间隔时间
  运行curl-loader的基本命令为:
  curl-loader -f config.conf
  ,这个config.conf就是上面的配置文件具体的设置需要根据需要,我根据我的需求一开始把CLIENTS_NUM_MAX=设置为2000,CLIENTS_NUM_START为100,CLIENTS_RAMPUP_INC为50,意思就是说一开始的虚拟客户端就是100个,然后以每秒50个用户的速度递增一直达到最大值2000。
  因为是一开始运行测试,所以我没有设置的很大。为什么初始值不一开始就设置成2000呢,这个道理很简单,1,容易使被测的系统崩溃;2,不符合真实的环境;从这两方面考虑,所以要让压力的递增像一个爬坡的曲线慢慢的到到最大客户端值,也就是最大的压力然后保持一个稳定的范围,最后得到测试的参数再进行分析。在结束测试的时候我个人认为不用慢慢的递减压力,可以一下子把压力撤掉。
模拟的用户数量越多,占用的IP地址就越多,所以设置用户数量的时候要看IP_ADDR_MIN和IP_ADDR_MAX这两个参数间的IP个数是否满足,不满足的话要做适当的修改,可以大于等于,但不能小于,否则在运行
  #curl-loader -f config.conf
  的时候就会提示让修改配置文件参数的错误
  待测目标改成服务器端的IP地址即可,其他的暂时不用修改。
  在运行curl-loaderl之前最好要修改一下系统打开文件的最大值,因为用的是Linux系统而Linux系统默认可以打开最大的文件数为1024,所以要修改大点,一般要超过CLIENTS_NUM_MAX的值,修改命令为:
  #ulimit -n 10000
  注:后面的数值越大越好,最好是远远超过curl-loader虚拟的客户端数量;如果不修改就会出现the current limit of open descriptors for the shell (1024)类似的错误
  好了,终于不报错了,可以执行curl-loader运行命令了,没错,这样可以运行了,但还不是最好的状态,最好在加上一些运行的命令参数这样才能更大的发挥curl-loder的作用,也是测试结果更为准确
  下面就是各个参数的说明,是在官方网站找的,我全部按照自己的意思翻译了,这么简单的事情我Google,百度了半天竟然没有一个中文资源可以参考
  -c[onnection establishment timeout, seconds] :设置连接超时的时间
  -d[etailed logging; outputs to logfile headers and bodies of requests/responses. Good for text pages/files] :把header和bodies的反应等详细的情况输入到日志中。
  -e[rror drop client. Client on error doesn't attempt to process the next cycle] :如果虚拟客户端出现错误则在下一次的周期请求中不再尝试。
  -h[elp] :帮助
  -i[ntermediate (snapshot) statistics time interval (default 3 sec)] :设置最后一段状况的时间,默认是最后3秒。
  -f[ilename of configuration to run (batches of clients)] :设置想要加载的配置文件
  -l[ogfile max size in MB (default 1024). On the size reached, file pointer is rewinded(回滚) :设置日志文件的最大容量,默认是1024MB,当达到最大值时文件将会回滚覆盖从最旧的日期。
  -m[ode of loading, 0 - hyper (the default, epoll () based ), 1 - smooth (select () based)] :两种系统调用方式,epoll要优于select,但是也要测试为目的去选择。
  -r[euse connections disabled. Closes TCP-connections and re-open them. Try with and without]:不再重试继续连接,每次重试连接之前都会关闭之前的连接。防止连接缓存
  -t[hreads number. Use it for high loads and when running at SMP/multi-core HW] :用于高负载并且还是多核的cpu时,可以分配线程数。
  -v[erbose output to the logfiles; includes info about headers sent/received] :把headers的收发的详细情况输出到日志中。
  -u[rl logging - logs url names to logfile, when -v verbose option is used] :url日志,把url名字记录在日志文件中,当用-v选项时会被显示出来。
  -w[arnings skip] :跳过警告。
  可能有人觉得这么简单的英文直接自己看帮助或者man手册不就行了,太多的道理我也不想多说,我只想说翻译成中文这很重要!
  根据我的需求,首先-f指定配置文件,-l 10240MB增大日志文件,-m 0 选择epoll()调用方法这两种方法是在被测系统的内核里设置的所以这个选择最好要跟被测系统中的内核的选择一致这样才能测试的更准确,-r每次都是重新建立连接,-t 2 我安装curl-loader的机器是双核的这样可以更充分的利用系统资源使机器发挥出更大的作用,-u 记录url到日志中。所以我的curl-loader的运行命令就是:
  #curl-loader -f /home/user/10K/10K.conf -l 10240MB -m 0 -r -t 2 -u
  你会看到屏幕刷刷的翻动着,到后面会有一个最后三秒运行和总curr的状态
  如果想要结束测试ctrl+c就可以了
  下一篇我会写这些状态参数和结果的意义
  简单总结下我学习上面这些东西的过程:
  首先是在Google和百度上搜索中文资料,毕竟中文更易快速的理解,但是很失望,中文关于curl-loader的有价值的资料很少,大部分都是介绍怎么去安装,连配置文件的各个配置都没有一个能完全说明的,收获最多的就是看了网上流传的所谓的一个XX老师的教学视频,但是看到最后发现也不靠谱,curl-loader的测试结果里有个很重要的参数CAPS硬是给人胡说着解释出来了,当时就怀疑,随即到官网查看还真不是他说的那个意思,所以要怀疑一切所谓的权威,最好到官方的网站去找答案,即使是英文的。
  血汗泪的教训啊~,所以勇敢的站起来去大胆的怀疑权威,细心的去认证吧!
  还有,因为是刚开始写博客还搞不懂怎么把代码调成高亮显示,后面会改成高亮的那种

最新内容请见作者的GitHub页:http://qaseven.github.io/

相关文章
|
10月前
|
人工智能 搜索推荐 UED
一个牛逼的国产AI自动化工具,开源了 !
AiPy是国产开源AI工具,结合大语言模型与Python,支持本地部署。用户只需用自然语言描述需求,即可自动生成并执行代码,轻松实现数据分析、清洗、可视化等任务,零基础也能玩转编程,被誉为程序员的智能助手。
|
11月前
|
机器学习/深度学习 人工智能 测试技术
EdgeMark:嵌入式人工智能工具的自动化与基准测试系统——论文阅读
EdgeMark是一个面向嵌入式AI的自动化部署与基准测试系统,支持TensorFlow Lite Micro、Edge Impulse等主流工具,通过模块化架构实现模型生成、优化、转换与部署全流程自动化,并提供跨平台性能对比,助力开发者在资源受限设备上高效选择与部署AI模型。
855 9
EdgeMark:嵌入式人工智能工具的自动化与基准测试系统——论文阅读
|
11月前
|
Java 测试技术 API
自动化测试工具集成及实践
自动化测试用例的覆盖度及关键点最佳实践、自动化测试工具、集成方法、自动化脚本编写等(兼容多语言(Java、Python、Go、C++、C#等)、多框架(Spring、React、Vue等))
813 6
|
12月前
|
前端开发 Java jenkins
Jmeter压力测试工具全面教程和使用技巧。
JMeter是一个能够模拟高并发请求以检查应用程序各方面性能的工具,包括但不限于前端页面、后端服务及数据库系统。熟练使用JMeter不仅能够帮助发现性能瓶颈,还能在软件开发早期就预测系统在面对真实用户压力时的表现,确保软件质量和用户体验。在上述介绍的基础上,建议读者结合官方文档和社区最佳实践,持续深入学习和应用。
2191 10
|
12月前
|
监控 Java 数据挖掘
利用Jmeter工具进行HTTP接口的性能测试操作
基础上述步骤反复迭代调整直至满足预期目标达成满意水平结束本轮压力评估周期进入常态监控阶段持续关注系统运转状态及时发现处理新出现问题保障服务稳定高效运作
1380 0
|
人工智能 数据可视化 测试技术
UAT测试排程工具深度解析:让验收测试不再失控,项目稳稳上线
在系统交付节奏加快的背景下,“测试节奏混乱”已成为项目延期的主因之一。UAT测试排程工具应运而生,帮助团队结构化拆解任务、清晰分配责任、实时掌控进度,打通需求、测试、开发三方协作闭环,提升测试效率与质量。本文还盘点了2025年热门UAT工具,助力团队选型落地,告别靠表格和群聊推进测试的低效方式,实现有节奏、有章法的测试管理。
|
Web App开发 人工智能 数据可视化
猫头虎 推荐:国产开源AI工具 爱派(AiPy)|支持本地部署、自动化操作本地文件的AI办公神器
爱派(AiPy)是一款国产开源AI工具,支持本地部署与自动化操作,助力数据处理与办公效率提升。基于Python Use理念,AiPy让AI直接控制本地文件,简化繁琐任务,提供高效智能的解决方案,适用于数据工程师、分析师及日常办公用户。
5507 0
|
敏捷开发 运维 数据可视化
DevOps看板工具中的协作功能:如何打破开发、测试与运维之间的沟通壁垒
在DevOps实践中,看板工具通过可视化任务管理和自动化流程,提升开发与运维团队的协作效率。它支持敏捷开发、持续交付,助力团队高效应对需求变化,实现跨职能协作与流程优化。
|
数据采集 人工智能 API
推荐一款Python开源的AI自动化工具:Browser Use
Browser Use 是一款基于 Python 的开源 AI 自动化工具,融合大型语言模型与浏览器自动化技术,支持网页导航、数据抓取、智能决策等操作,适用于测试、爬虫、信息提取等多种场景。
1611 4
推荐一款Python开源的AI自动化工具:Browser Use
|
数据可视化 测试技术 Go
Go 语言测试与调试:`go test` 工具用法
`go test` 是 Go 语言内置的测试工具,支持单元测试、基准测试、示例测试等功能。本文详解其常用参数、调试技巧及性能测试命令,并提供实际项目中的应用示例与最佳实践。