蟑螂恶霸的博客 蟑螂恶霸的博客
首页
  • Web自动化
  • 自动化测试框架
  • 接口自动化
  • 测试面试题
  • 技术文档
  • GitHub技巧
  • 博客搭建
  • Vue
  • JavaScript
  • Nginx
  • 自动化测试
  • 学习
  • 面试
  • 心情杂货
  • 实用技巧
  • 友情链接
关于
收藏
  • 分类
  • 标签
  • 归档
GitHub (opens new window)

蟑螂恶霸

一个爱折腾的程序员,什么都想试试!
首页
  • Web自动化
  • 自动化测试框架
  • 接口自动化
  • 测试面试题
  • 技术文档
  • GitHub技巧
  • 博客搭建
  • Vue
  • JavaScript
  • Nginx
  • 自动化测试
  • 学习
  • 面试
  • 心情杂货
  • 实用技巧
  • 友情链接
关于
收藏
  • 分类
  • 标签
  • 归档
GitHub (opens new window)
  • web自动化

  • 自动化测试框架

  • 接口自动化测试

  • 测试面试题

  • Pytest

    • 快速入门和基础讲解
    • assert断言详细使用
    • setup和teardown的详细使用
    • fixture的详细使用
    • 测试用例执行后的几种状态
    • conftest.py的详细讲解
    • skip、skipif跳过用例
    • 使用自定义标记mark
    • 参数化@pytest.mark.parametrize
    • fixture 传参数 request的详细使用
    • 失败重跑插件pytest-rerunfailures的详细使用
    • 测试结果生成HTML报告插件之pytest-html的详细使用
    • 重复执行用例插件之pytest-repeat的详细使用
    • 配置文件pytest.ini的详细使用
    • 多重校验插件之pytest-assume的详细使用
    • 分布式测试插件之pytest-xdist的详细使用
    • pytest-xdist分布式测试的原理和流程
    • 超美测试报告插件之allure-pytest的基础使用
    • 我们需要掌握的allure特性
    • allure的特性,@allure.step()、allure.attach的详细使用
    • allure的特性,@allure.description()、@allure.title()的详细使用
    • allure的特性,@allure.link()、@allure.issue()、@allure.testcase()的详细使用
    • allure 打标记之 @allure.epic()、@allure.feature()、@allure.story() 的详细使用
    • allure 环境准备
    • allure.severity 标记用例级别
      • 前言
      • 用例等级介绍
      • 实际栗子
        • 测试代码
        • allure 报告
        • 必然测试失败的测试代码
      • 命令行参数 allure-severities
    • 清空 allure 历史报告记录
    • allure 命令行参数
    • 参数化 parametrize + @allure.title() 动态生成标题
    • 详解 allure.dynamic 动态生成功能
    • 使用 pytest-xdist 分布式插件,如何保证 scope=session 的 fixture 在多进程运行情况下仍然能只运行一次
  • 自动化测试
  • Pytest
蟑螂恶霸
2022-07-22
目录

allure.severity 标记用例级别

# 前言

  • 平时写测试用例也会划分优先级
  • 同样,allure 也提供用例级别,在 allure 报告可以清晰看到不同级别用例的缺陷数量

# 用例等级介绍

# allure 提供的枚举类

# 等级介绍

  • blocker:阻塞缺陷(功能未实现,无法下一步)
  • critical:严重缺陷(功能点缺失)
  • normal: 一般缺陷(边界情况,格式错误)
  • minor:次要缺陷(界面错误与ui需求不符)
  • trivial: 轻微缺陷(必须项无提示,或者提示不规范)

# 实际栗子

# 测试代码

import allure

def test_with_no_severity_label():
    pass

@allure.severity(allure.severity_level.TRIVIAL)
def test_with_trivial_severity():
    pass

@allure.severity(allure.severity_level.NORMAL)
def test_with_normal_severity():
    pass

@allure.severity(allure.severity_level.NORMAL)
class TestClassWithNormalSeverity(object):

    def test_inside_the_normal_severity_test_class(self):
        """ 测试类优先级 normal;看看测试用例是否会自动继承优先级 """
        print()

    @allure.severity(allure.severity_level.CRITICAL)
    def test_inside_the_normal_severity_test_class_with_overriding_critical_severity(self):
        """
        测试类优先级 normal
        测试用例优先级 critical
        """
        pass

@allure.severity("normal")
def test_case_1():
    """ normal 级别测试用例 """
    print("test case 11111111")


@allure.severity("critical")
def test_case_2():
    """ critical 级别测试用例 """
    print("test case 222222222")


@allure.severity("blocker")
def test_case_3():
    """ blocker 级别测试用例 """
    print("test case 4444444")


@allure.severity("minor")
def test_case_4():
    """ minor 级别测试用例 """
    print("test case 11111111")

def test_case_5():
    """ 没标记 severity 的用例默认为 normal"""
    print("test case 5555555555")
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54

# allure 报告

# 测试用例详情

多了个 severity 字段

# 统计图表

可以看到不同 severity 测试用例运行的统计数据

# 必然测试失败的测试代码

将上面代码的三个测试用例故意让它测试失败

@allure.severity("normal")
def test_case_1():
    """ normal 级别测试用例 """
    assert (1 == 2)


@allure.severity("critical")
def test_case_2():
    """ critical 级别测试用例 """
    assert (1 == 2)


@allure.severity("blocker")
def test_case_3():
    """ blocker 级别测试用例 """
    assert (1 == 2)
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16

# 再来看看 allure 报告的统计图表

  • 这里用的是中文报告,其实可以看到 severity 官方是翻译为优先级,但是如果自己去翻译软件翻译的话是严重程度,我个人更偏向于理解为优先级
  • 会同时显示同一个优先级的失败、通过用例数,以及哪条用例是失败、通过的

# 命令行参数 allure-severities

当然,也可以根据优先级选择需要运行的测试用例

# 具体栗子

仍然是上面的代码,打开 cmd

# 只运行 severity=blocker、critical 的测试用例
pytest test_severity.py -sq --alluredir=./allure --allure-severities=blocker,critical

# 写法二
pytest test_severity.py -sq --alluredir=./allure --allure-severities blocker,critical
1
2
3
4
5

# 运行结果

severi=blocker、critical 的测试用例就三条,可以看看上面的代码

本文转自 https://www.cnblogs.com/poloyy/p/13889635.html (opens new window),如有侵权,请联系删除。

上次更新: 2022/10/15, 15:19:25
allure 环境准备
清空 allure 历史报告记录

← allure 环境准备 清空 allure 历史报告记录→

最近更新
01
实现定时任务数据库配置
06-09
02
SQL Server连接
02-22
03
RSA加密工具类
02-22
更多文章>
Theme by Vdoing | Copyright © 2022-2023 蟑螂恶霸 | Blog
  • 跟随系统
  • 浅色模式
  • 深色模式
  • 阅读模式