深聊性能测试,从入门到放弃之:Locust性能自动化(七)HAR-files→locustfiles自动转换 :Transformer的使用

简介: 深聊性能测试,从入门到放弃之:Locust性能自动化(七)HAR-files→locustfiles自动转换 :Transformer的使用

1、引言


在使用Locust时, 都会想到,

那么,有没有一种工具,把浏览器的记录,自动的转换成locust文件呢?

那么,又是如何转换的呢?

今天,就跟着小鱼一起,看看如何把浏览器记录 自动转换成 Locust文件


2、安装及调用


2.1 介绍

Transformer概括来说就是一个命令行工具 和Python库,用户将web浏览器的记录(HAR files) 转换成Locust负载测试方案(即 “locustfiles”)。

用它来重播HAR file(存储浏览器的浏览记录)在Locust的负载测试中。


2.2 安装

安装方式,同样是 pip 安装


transformer 安装


pip install har-transformer

注意


Tranformer 暂时并不支持新的Locust 版本(1.0及以上版本)


所以,如果要使用Tranformer,就需要确认 Locust的版本。


我们来指定安装 Locust 版本:

Locust 安装


pip install locustio==0.14.6

2.3 使用

2.3.1 保存HAR files

问:我们把浏览记录保存成HAR 格式,需要分几步?

答:需要分三步。


第一步

打开浏览器 开发者模式,即 按下 F12。


第二步

浏览数据,使其生成数据


第三步

选择需要保持的数据,点击鼠标右键→保存成 HAR 。


如下图


image.png

注:


关于如何创建HAR file,在第3章节,会详细介绍。


2.3.2 命令行工具

我们把HAR-files 转换成locustfiles,

直接转换即可,


transformer my_har_files_directory/ >locustfile.py


my_har_files_directory 是刚刚保存的 HAR 文件


2.3.3 作为库被调用

我们把HAR-file 转换成locustfile,当成python库被调用。

老规矩,上代码。


代码


# -*- coding: utf-8 -*-
"""
@ auth : carl_DJ
@ time : 2020-10-27
"""
import transformer
#打开文件
with open ("locustfile.py","w") as f :
  transformer.dump(f, ["my_har_files_directory/"])

3、 创建HAR-file


3.1 简介

HAR文件是JSON文件,用于存储从服务器的角度“重放” Web浏览会话所需的所有内容。

它们包含由Web浏览器发出的所有Web请求以及来自服务器的相应响应。


因此,我们经常将HAR文件称为场景:就像戏剧或电影的场景一样,它描述了应该发生的情况。


Transformer将这些HAR文件转换为一个程序,该程序 通过大规模重放记录的场景来对访问的网站进行负载测试。


3.2 录制场景

因为小鱼对chrome是很钟爱的,所以,就拿chrome来举例,

但是firefox 浏览器操作方法也一样,所以,在这里就不单独说明了。


在录制场景时, 我们需要做以下几步:


①准备方案


②启动浏览器,(需要确认只有想要的Cookie,而没有多余的Cookie)


③打开开发者工具,(通常 F12)


④选择 Network tab


⑤选择禁用缓存并保存日志


⑥通过单击清除🚫按钮清除现有日志。


⑦确保已启用录制:“录制”按钮应为红色🔴(单击以进行切换)。


⑧通过在地址栏中输入URL(例如 https://blog.csdn.net/wuyoudeyuer)来导航到目标站点。


⑨通过单击页面,填写表格,单击按钮等来执行方案。


注:


在每次单击/操作之后以及下一次单击/操作之前,

建议数据全部被加载完成,或者说数据被全部清理干净。

这样可以确保正确记录所有请求。


图片展示


image.png

3.3 保存HAR

在完成方案后,就可以执行以下的操作:


①单击“录制”🔴按钮结束录制。


②右键单击“Network”面板底部窗格中,输入文件名。


③选择 HAR 并"另存为…"到指定的位置。


注:

查看保存的HAR文件内容的方法:


将HAR文件拖放到Chrome开发者工具网络面板中即可


3.4 特定场景

3.4.1 制定权重

默认情况下,Transformer认为所有方案的权重均为1,

我们如果需要修改权重,可以创建关联的权重文件为每个HAR文件指定不同的权重。


例如

要权衡abc.har场景,请abc.weight在同一目录中创建一个文件。

abc.weight应该包含您要关联的权重abc.har,例如2或76。



权重 必须为正,非空正数


展示一下方案文件组构成


$ ls
scenario1.har
scenario2.har
scenario2.weight
$ cat scenario2.weight

Transformer将在相应的locustfile中指定的权重:

情境 重量

scenario1.har 1个

scenario2.har 3

image.png

这就意味着 Locust 运行时,scenario2.har 是 scenario1.har 的3倍。


3.4.2 分层方案

在某些情况下,可能无法一视同仁:


・有些仅适用于您的负载测试目标的一部分,

・一些更繁琐的运行方案。


为了更适应这种运行方案,我们可以设置成一个分层结构,

每个目录都可能与特定权重相关联:


scenarios/

|-------Germany/

|--------|----------scenario_1.har

|--------|----------scenario_2.har

|--------|----------scenario_2.weight

|------- Germany.weight

|------- witzerland/

|--------|----------scenario_1.har

|--------Switzerland.weight


目录的重量文件(Germany.weight,Switzerland.weight)类似的场景重文件,但适用于整个目录(相对同级别的其他目录)。


就像HAR文件一样,没有权重文件的目录的默认权重为1。

同样,方案可以任意嵌套


scenarios/

|-------Germany/

|--------|----------beauty/

|--------|----------|-----checkout.har

|--------|----------kids/

|--------|----------|-----frontpage.har

|--------|----------kids.weight

|--------|----------|-----scenario_1.har

|------- Germany.weight

|------- witzerland/

|--------|----------scenario_1.har

|--------Switzerland.weight


Transformer将在结果locustfile中生成嵌套的Locust TaskSet。


3.4.3 忽略特定URL

默认情况下,Transformer提供的HAR文件中找到的所有请求。

但是,可以通过在执行Transformer的目录中创建文件来将某些URL列入黑名单(即忽略)


例如

创建 testurl.urlignore


google
www.baidu.com
https://csdn

则,在执行时的时候,会忽略带有上面信息的url地址

例如


https://www.google.com

https://www.baidu.com/

https://blog.csdn.net/wuyoudeyuer


嗯,今天的分享,就到这里。


相关实践学习
通过性能测试PTS对云服务器ECS进行规格选择与性能压测
本文为您介绍如何利用性能测试PTS对云服务器ECS进行规格选择与性能压测。
目录
相关文章
|
3月前
|
存储 测试技术 Linux
添加E1000网卡进行测试,只有VMXNET3性能的四分之一
添加E1000网卡进行测试,只有VMXNET3性能的四分之一
42 0
|
3月前
|
XML 测试技术 数据格式
Python性能测试Locust简介
Python性能测试Locust简介
Python性能测试Locust简介
|
4月前
|
Java 应用服务中间件 测试技术
Tomcat压力测试tps性能下降问题
Tomcat压力测试tps性能下降问题
|
5月前
|
存储 缓存 Linux
百度搜索:蓝易云【如何在Linux系统服务器中测试存储/磁盘I/O性能?】
这些工具可以帮助你测试磁盘的读取和写入性能,并提供各种性能指标和统计数据。请注意,在运行这些测试时,确保没有重要的数据存储在被测试的磁盘上,并谨慎操作以避免对系统和数据造成不必要的影响。
81 0
|
1月前
|
测试技术 BI
性能基准测试基本流程
性能基准测试基本流程
|
6月前
|
JSON 测试技术 API
深聊性能测试,从入门到放弃之:Locust性能自动化(五)API汇总整理(下)
深聊性能测试,从入门到放弃之:Locust性能自动化(五)API汇总整理(下)
69 0
|
6月前
|
数据采集 算法 测试技术
深聊性能测试,从入门到放弃之:Locust性能自动化(二)代码实战
深聊性能测试,从入门到放弃之:Locust性能自动化(二)代码实战
138 1
|
3月前
|
存储 测试技术 区块链
阿里云、百度云及移动云对象存储横向性能对比测试
在企业的数字化转型进程中,我们观察到越来越多的公司将其IT基础设施迁移到云端。随着企业业务的持续运营,无论是储存、处理、分享还是删除,都会产生大量的数据,这就要求有一个既可靠又高效的系统来管理和存储这些信息。对象存储产品在这个场景中扮演了至关重要的角色。它们以一种可扩展、安全、持久的方式,有效地满足了对大规模非结构化数据存储的需求。 尽管市场上云计算提供商众多,各自都有自己独特的对象存储产品,面对这样的丰富选择,如何寻找最符合企业需求的产品呢?这正是企业今天寻求解答的问题。 在本篇文章中,我们将深入进行一项横向对比测试,专门对阿里云OSS、百度云BOS和移动云EOS这三大云服务提供商的对象
525 0
|
3月前
|
NoSQL 测试技术 Redis
Redis【性能 02】Redis-5.0.14伪集群和Docker集群搭建及延迟和性能测试(均无法提升性能)
Redis【性能 02】Redis-5.0.14伪集群和Docker集群搭建及延迟和性能测试(均无法提升性能)
50 0
|
3月前
|
NoSQL 测试技术 Redis
Redis【性能 01】Redis 5.x 6.x 7.x 共5个不同版本延迟及性能测试对比分析(单机版默认配置)
Redis【性能 01】Redis 5.x 6.x 7.x 共5个不同版本延迟及性能测试对比分析(单机版默认配置)
62 0

相关产品

  • 云迁移中心