性能工具之 JMeter 使用 shell 脚本快速执行

简介: 【2月更文挑战第30天】性能工具之 JMeter 使用 shell 脚本快速执行

一、背景

在 Linux 中执行 JMeter 脚本时候,大家是否一直使用jmeter -n -t [jmx file] -l [results file] -e -o [Path to web report folder]命令执行,是否想过通过 shell 脚本或者 python 快速执行.

今天简单介绍下 shell 脚本执行。前置条件需要配置 JMeter 环境变量,如果没有配置,需要在脚本中修改相应位置。

二、效果

image.png

shell 脚本:
image.png

image.png

三、环境变量配置

vi ~/.bash_profile
#jmeter:路径
JMETER_HOME=/root/tools/apache-jmeter-3.3
PATH=$PATH:$HOME/bin:$JMETER_HOME/bin:
export PATH

#执行生效:
source ~/.bash_profile

验证:

image.png

四、脚本解析

1、参考代码

#!/bin/bash
# author:7DGroup
# 2019/12/08/20/50

cmdsh="/home/gaolou/apache-jmeter-3.1/bin/JMeterPluginsCMD.sh"
case=$1
mNum=$2
durationTime=$3
mark=$4
resultDataFileName="resultData.csv"
#hostIps="101.201.210.163"
nowPwd=`pwd`

echo -e "\033[32m-压力机开始执行。。请等待-\033[1m"

echo testcaseName:${case}_${mNum}_${durationTime}_${mark}
if [ -z ${case} ];then
        echo -e "\033[32m请输入脚本名,线程数,执行时间,备注! 输入脚本名\033[0m"
        echo "ERROR"
        exit 1
fi
if [ -z ${mNum} ];then
        echo -e "\033[32m请输入脚本名,线程数,执行时间,备注! 输入线程数\033[1m"
        echo "ERROR"
        exit 1
fi
if [ -z ${durationTime} ];then
        echo -e "\033[32m请输入脚本名,线程数,执行时间,备注! 输入备注\033[1m"
        echo "ERROR"
        exit 1
fi

oneTest(){
   
   
    filename=${case}_${mNum}_${durationTime}_${mark}
    echo "filename:"${filename}
    mkdir -p ${nowPwd}/${case}
    cd ${nowPwd}/${case}
    cp ${nowPwd}/testPlan/${case}.jmx ${nowPwd}/${case}/${case}.jmx
    if [ ! -f ${resultDataFileName} ];then
                echo -e "sceneName,sceneThreadNum,duration(s),interfaceName,interfaceNum,totalCount,tps,errorPersent,avgTims(ms),persentTime(ms)" > ${resultDataFileName}
    fi
    rm -rf ${filename}
    mkdir ${filename}
    cp ${case}.jmx ${nowPwd}/${case}/${filename}/${filename}.jmx
    cd ${nowPwd}/${case}/${filename}/
    sed -i "s#name=\"ThreadGroup\.num_threads\">2<#name=\"ThreadGroup\.num_threads\">$((2*mNum))<#g" ${filename}.jmx
    sed -i "s#name=\"ThreadGroup\.num_threads\">1<#name=\"ThreadGroup\.num_threads\">$((1*mNum))<#g" ${filename}.jmx
    sed -i "s#ERRORXML#${nowPwd}/${case}/${filename}/${filename}_ERROR.xml#g" ${filename}.jmx
    sed -i "s#ThreadGroup.scheduler\">.*</#ThreadGroup.scheduler\">true</#g" ${filename}.jmx
    sed -i "s#LoopController\.loops\">.*</#LoopController\.loops\">-1</#g" ${filename}.jmx
    sed -i "s#LoopController\.continue_forever\">.*</#LoopController\.continue_forever\">true</#g"  ${filename}.jmx
    sed -i "s#ThreadGroup.duration\">.*</#ThreadGroup.duration\">${durationTime}</#g" ${filename}.jmx

   if [ -z ${hostIps} ];then
        #jmeter -n -t ${filename}.jmx -l ${filename}.jtl -j ${filename}.log
        jmeter  -n -t ${filename}.jmx -l ${filename}.jtl -j ${filename}.log -e -o ${filename}
   else
        jmeter  -n -t ${filename}.jmx -R ${hostIps}  -l ${filename}.jtl -j ${filename}.log -e -o ${filename}
         #jmeter -n -t ${filename}.jmx -R ${hostIps} -l ${filename}.jtl -j ${filename}.log
    fi

    ${cmdsh} --generate-csv ${filename}.csv --input-jtl ${filename}.jtl --plugin-type AggregateReport
    local sumThread=`grep "<stringProp name=\"ThreadGroup.num_threads\">" ${filename}.jmx |awk -F\> '{print $2}'|awk -F\< 'BEGIN{sum=0}{sum=sum+$1}END{print sum}'`
    if [ -z ${
    
    hostIps} ];then
        hostNum=1
     else
        hostNum=`echo ${hostIps}|awk -F, '{print NF}'`
        let sumThread=sumThread*hostNum
        let mNum=mNum*hostNum
    fi
    sed -n '2,$p' ${filename}.csv|grep -v TOTAL| awk -F, -v case=${filename} -v tnum=${sumThread} -v duration=${durationTime} '{printf("%s,%s,%s,%s,%s,%s,%s,%s,90%time:%s;95%time:%s;99%time:%s\n",case,tnum,duration,
$1,$2,$11,$10,$3,$5,$6,$7)}' >> sDGroup
    local totalGroup=`cat sDGroup|wc -l`
    for((i=1;i<=${totalGroup};i++))
    do
       sed -n "${i}p" sDGroup|awk -F, -v tnum=${mNum} '{printf("%s,%s,%s,%s,%s,%s,%s,%s,%s,%s\n",$1,$2,$3,$4,tnum,$5,$6,$7,$8,$9)}' >>../${resultDataFileName}
    done
}
oneTest

echo -e "\033[32m-压力已经结束-\033[1m"

2、主要逻辑

脚本执行方法:

  • 给予可执行权限:chomd a+x startJmeter.sh
  • 执行方法:sh startJmeter.sh 脚本名字 并发数 执行时间 备注
cmdsh="/home/gaolou/apache-jmeter-3.1/bin/JMeterPluginsCMD.sh"
case=$1  #脚本名字
mNum=$2  #并发数 
durationTime=$3  #执行时间
mark=$4    #备注
resultDataFileName="resultData.csv"  #csv命令保存数据
#hostIps="101.201.210.163"   #如果是多台机器需要取消该注释,把压力机器全部加上

通过 sed -i 替换执行并发数、执行时间等信息

sed -i "s#name=\"ThreadGroup\.num_threads\">2<#name=\"ThreadGroup\.num_threads\">$((2*mNum))<#g" ${filename}.jmx
sed -i "s#name=\"ThreadGroup\.num_threads\">1<#name=\"ThreadGroup\.num_threads\">$((1*mNum))<#g" ${filename}.jmx
sed -i "s#ERRORXML#${nowPwd}/${case}/${filename}/${filename}_ERROR.xml#g" ${filename}.jmx
sed -i "s#ThreadGroup.scheduler\">.*</#ThreadGroup.scheduler\">true</#g" ${filename}.jmx
sed -i "s#LoopController\.loops\">.*</#LoopController\.loops\">-1</#g" ${filename}.jmx
sed -i "s#LoopController\.continue_forever\">.*</#LoopController\.continue_forever\">true</#g"  ${filename}.jmx
sed -i "s#ThreadGroup.duration\">.*</#ThreadGroup.duration\">${durationTime}</#g" ${filename}.jmx

通过封装 Jmeter -n -t 。。。等信息去执行脚本,该执行命令可以根据自己需要修改

if [ -z ${hostIps} ];then
        #jmeter -n -t ${filename}.jmx -l ${filename}.jtl -j ${filename}.log
        jmeter  -n -t ${filename}.jmx -l ${filename}.jtl -j ${filename}.log -e -o ${filename}
   else
        jmeter  -n -t ${filename}.jmx -R ${hostIps}  -l ${filename}.jtl -j ${filename}.log -e -o ${filename}
        #jmeter -n -t ${filename}.jmx -R ${hostIps} -l ${filename}.jtl -j ${filename}.log
    fi

结果保存通过插件 JMeterPluginsCMD.sh 执行获取 csv 数据,如果想知道该插件详细信息可以搜索下怎么使用。

${cmdsh} --generate-csv ${filename}.csv --input-jtl ${filename}.jtl --plugin-type AggregateReport
    local sumThread=`grep "<stringProp name=\"ThreadGroup.num_threads\">" ${filename}.jmx |awk -F\> '{print $2}'|awk -F\< 'BEGIN{sum=0}{sum=sum+$1}END{print sum}'`
    if [ -z ${
    
    hostIps} ];then
        hostNum=1
     else
        hostNum=`echo ${hostIps}|awk -F, '{print NF}'`
        let sumThread=sumThread*hostNum
        let mNum=mNum*hostNum
    fi
    sed -n '2,$p' ${filename}.csv|grep -v TOTAL| awk -F, -v case=${filename} -v tnum=${sumThread} -v duration=${durationTime} '{printf("%s,%s,%s,%s,%s,%s,%s,%s,90%time:%s;95%time:%s;99%time:%s\n",case,tnum,duration,
$1,$2,$11,$10,$3,$5,$6,$7)}' >> sDGroup
    local totalGroup=`cat sDGroup|wc -l`
    for((i=1;i<=${totalGroup};i++))
    do
       sed -n "${i}p" sDGroup|awk -F, -v tnum=${mNum} '{printf("%s,%s,%s,%s,%s,%s,%s,%s,%s,%s\n",$1,$2,$3,$4,tnum,$5,$6,$7,$8,$9)}' >>../${resultDataFileName}
    done

JMX 脚本写法需要注意

image.png

这里实际上 shell 脚本是替换【ThreadGroup.num_threads">1】

image.png

3、目录说明

脚本存放目录:
image.png
image.png

shell 脚本存放位置:
image.png

执行结果:
image.png

  1. 表示当前执行的脚本名字
  2. 表示原始脚本
  3. csc 结果保存

执行脚本结果目录说明:
image.png
image.png

打开脚本:
image.png

vim日志:
image.png

4、下载报告

使用 tar 命令

  • 解包:tar zxvf FileName.tar
  • 打包:tar zcvf FileName.tar DirName

下载:

sz filename.tar

image.png

下载解压后打开:

image.png
image.png

五、总结

通过 shell 脚本执行Jmeter脚本,如果是长时间执行可以采用后台执行方法,加上 nohup 这样执行不用担心 ssh 窗口执行失败。

源码地址:

目录
相关文章
|
2月前
|
Shell
一个用于添加/删除定时任务的shell脚本
一个用于添加/删除定时任务的shell脚本
86 1
|
3月前
|
测试技术 数据库 UED
Python 性能测试进阶之路:JMeter 与 Locust 的强强联合,解锁性能极限
【9月更文挑战第9天】在数字化时代,确保软件系统在高并发场景下的稳定性至关重要。Python 为此提供了丰富的性能测试工具,如 JMeter 和 Locust。JMeter 可模拟复杂请求场景,而 Locust 则能更灵活地模拟真实用户行为。结合两者优势,可全面评估系统性能并优化瓶颈。例如,在电商网站促销期间,通过 JMeter 模拟大量登录请求并用 Locust 模拟用户浏览和购物行为,可有效识别并解决性能问题,从而提升系统稳定性和用户体验。这种组合为性能测试开辟了新道路,助力应对复杂挑战。
114 2
|
29天前
|
Shell Linux 测试技术
6种方法打造出色的Shell脚本
6种方法打造出色的Shell脚本
53 2
6种方法打造出色的Shell脚本
|
15天前
|
XML JSON 监控
Shell脚本要点和难点以及具体应用和优缺点介绍
Shell脚本在系统管理和自动化任务中扮演着重要角色。尽管存在调试困难、可读性差等问题,但其简洁高效、易于学习和强大的功能使其在许多场景中不可或缺。通过掌握Shell脚本的基本语法、常用命令和函数,并了解其优缺点,开发者可以编写出高效的脚本来完成各种任务,提高工作效率。希望本文能为您在Shell脚本编写和应用中提供有价值的参考和指导。
43 1
|
20天前
|
Ubuntu Shell 开发工具
ubuntu/debian shell 脚本自动配置 gitea git 仓库
这是一个自动配置 Gitea Git 仓库的 Shell 脚本,支持 Ubuntu 20+ 和 Debian 12+ 系统。脚本会创建必要的目录、下载并安装 Gitea,创建 Gitea 用户和服务,确保 Gitea 在系统启动时自动运行。用户可以选择从官方或小绿叶技术博客下载安装包。
40 2
|
2月前
|
监控 网络协议 Shell
ip和ip网段攻击拦截系统-绿叶结界防火墙系统shell脚本
这是一个名为“小绿叶技术博客扫段攻击拦截系统”的Bash脚本,用于监控和拦截TCP攻击。通过抓取网络数据包监控可疑IP,并利用iptables和firewalld防火墙规则对这些IP进行拦截。同时,该系统能够查询数据库中的白名单,确保合法IP不受影响。此外,它还具备日志记录功能,以便于后续分析和审计。
49 6
|
1月前
|
运维 监控 Shell
深入理解Linux系统下的Shell脚本编程
【10月更文挑战第24天】本文将深入浅出地介绍Linux系统中Shell脚本的基础知识和实用技巧,帮助读者从零开始学习编写Shell脚本。通过本文的学习,你将能够掌握Shell脚本的基本语法、变量使用、流程控制以及函数定义等核心概念,并学会如何将这些知识应用于实际问题解决中。文章还将展示几个实用的Shell脚本例子,以加深对知识点的理解和应用。无论你是运维人员还是软件开发者,这篇文章都将为你提供强大的Linux自动化工具。
|
2月前
|
测试技术 持续交付 Apache
性能怪兽来袭!Python+JMeter+Locust,让你的应用性能飙升🦖
【10月更文挑战第10天】随着互联网应用规模的不断扩大,性能测试变得至关重要。本文将探讨如何利用Python结合Apache JMeter和Locust,构建高效且可定制的性能测试框架。通过介绍JMeter和Locust的使用方法及Python的集成技巧,帮助应用在高负载下保持稳定运行。
69 2
|
3月前
|
缓存 Java 测试技术
谷粒商城笔记+踩坑(11)——性能压测和调优,JMeter压力测试+jvisualvm监控性能+资源动静分离+修改堆内存
使用JMeter对项目各个接口进行压力测试,并对前端进行动静分离优化,优化三级分类查询接口的性能
101 10
谷粒商城笔记+踩坑(11)——性能压测和调优,JMeter压力测试+jvisualvm监控性能+资源动静分离+修改堆内存
|
2月前
|
测试技术 持续交付 Apache
性能怪兽来袭!Python+JMeter+Locust,让你的应用性能飙升🦖
【10月更文挑战第2天】随着互联网应用规模的不断膨胀,性能测试变得至关重要。本文将介绍如何利用Python结合Apache JMeter和Locust构建高效且可定制的性能测试框架。Apache JMeter是一款广泛使用的开源负载测试工具,适合测试静态和动态资源;Locust则基于Python,通过编写简单的脚本模拟HTTP请求,更适合复杂的测试场景。
66 3