Pytest 系列（25）- @allure.severity 标记用例级别

2022-05-12 204

版权

本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

简介： Pytest 系列（25）- @allure.severity 标记用例级别

如果你还想从头学起Pytest，可以看看这个系列的文章哦！

https://www.cnblogs.com/poloyy/category/1690628.html

前言

平时写测试用例也会划分优先级
同样，allure 也提供用例级别，在 allure 报告可以清晰看到不同级别用例的缺陷数量

用例等级介绍

allure 提供的枚举类

等级介绍

blocker：阻塞缺陷（功能未实现，无法下一步）
critical：严重缺陷（功能点缺失）
normal：一般缺陷（边界情况，格式错误）
minor：次要缺陷（界面错误与ui需求不符）
trivial：轻微缺陷（必须项无提示，或者提示不规范）

实际栗子

测试代码

#!/usr/bin/env python
# -*- coding: utf-8 -*-
"""
__title__  =
__Time__   = 2020-04-19 14:50
__Author__ = 小菠萝测试笔记
__Blog__   = https://www.cnblogs.com/poloyy/
"""
import allure
def test_with_no_severity_label():
    pass
@allure.severity(allure.severity_level.TRIVIAL)
def test_with_trivial_severity():
    pass
@allure.severity(allure.severity_level.NORMAL)
def test_with_normal_severity():
    pass
@allure.severity(allure.severity_level.NORMAL)
class TestClassWithNormalSeverity(object):
    def test_inside_the_normal_severity_test_class(self):
        """ 测试类优先级 normal；看看测试用例是否会自动继承优先级 """
        print()
    @allure.severity(allure.severity_level.CRITICAL)
    def test_inside_the_normal_severity_test_class_with_overriding_critical_severity(self):
        """
        测试类优先级 normal
        测试用例优先级 critical
        """
        pass
@allure.severity("normal")
def test_case_1():
    """ normal 级别测试用例 """
    print("test case 11111111")
@allure.severity("critical")
def test_case_2():
    """ critical 级别测试用例 """
    print("test case 222222222")
@allure.severity("blocker")
def test_case_3():
    """ blocker 级别测试用例 """
    print("test case 4444444")
@allure.severity("minor")
def test_case_4():
    """ minor 级别测试用例 """
    print("test case 11111111")
def test_case_5():
    """ 没标记 severity 的用例默认为 normal"""
    print("test case 5555555555")

allure 报告

测试用例详情

多了个 severity 字段

统计图表

可以看到不同 severity 测试用例运行的统计数据

必然测试失败的测试代码

将上面代码的三个测试用例故意让它测试失败

@allure.severity("normal")
def test_case_1():
    """ normal 级别测试用例 """
    assert (1 == 2)
@allure.severity("critical")
def test_case_2():
    """ critical 级别测试用例 """
    assert (1 == 2)
@allure.severity("blocker")
def test_case_3():
    """ blocker 级别测试用例 """
    assert (1 == 2)

再来看看 allure 报告的统计图表

这里用的是中文报告，其实可以看到 severity 官方是翻译为优先级，但是如果自己去翻译软件翻译的话是严重程度，我个人更偏向于理解为优先级
会同时显示同一个优先级的失败、通过用例数，以及哪条用例是失败、通过的

命令行参数 allure-severities

当然，也可以根据优先级选择需要运行的测试用例

具体栗子

仍然是上面的代码，打开 cmd

# 只运行 severity=blocker、critical 的测试用例
pytest test_severity.py -sq --alluredir=./allure --allure-severities=blocker,critical
# 写法二
pytest test_severity.py -sq --alluredir=./allure --allure-severities blocker,critical

运行结果

severi=blocker、critical 的测试用例就三条，可以看看上面的代码