Pytest 系列（25）- @allure.severity 標記用例級別

如果你還想從頭學起Pytest，可以看看這個系列的文章哦！

https://www.cnblogs.com/poloyy/category/1690628.html

 

前言

• 平時寫測試用例也會划分優先級
• 同樣，allure 也提供用例級別，在 allure 報告可以清晰看到不同級別用例的缺陷數量 

 

用例等級介紹

allure 提供的枚舉類

 

等級介紹

• blocker：阻塞缺陷（功能未實現，無法下一步）
• critical：嚴重缺陷（功能點缺失）
• normal： 一般缺陷（邊界情況，格式錯誤）
• minor：次要缺陷（界面錯誤與ui需求不符）
• trivial： 輕微缺陷（必須項無提示，或者提示不規范）

 

實際栗子

測試代碼

#!/usr/bin/env python
# -*- coding: utf-8 -*-

"""
__title__  =
__Time__   = 2020-04-19 14:50
__Author__ = 小菠蘿測試筆記
__Blog__   = https://www.cnblogs.com/poloyy/
"""

import allure


def test_with_no_severity_label():
    pass


@allure.severity(allure.severity_level.TRIVIAL)
def test_with_trivial_severity():
    pass


@allure.severity(allure.severity_level.NORMAL)
def test_with_normal_severity():
    pass


@allure.severity(allure.severity_level.NORMAL)
class TestClassWithNormalSeverity(object):

    def test_inside_the_normal_severity_test_class(self):
        """ 測試類優先級 normal；看看測試用例是否會自動繼承優先級 """
        print()

    @allure.severity(allure.severity_level.CRITICAL)
    def test_inside_the_normal_severity_test_class_with_overriding_critical_severity(self):
        """
        測試類優先級 normal
        測試用例優先級 critical
        """
        pass


@allure.severity("normal")
def test_case_1():
    """ normal 級別測試用例 """
    print("test case 11111111")


@allure.severity("critical")
def test_case_2():
    """ critical 級別測試用例 """
    print("test case 222222222")


@allure.severity("blocker")
def test_case_3():
    """ blocker 級別測試用例 """
    print("test case 4444444")


@allure.severity("minor")
def test_case_4():
    """ minor 級別測試用例 """
    print("test case 11111111")


def test_case_5():
    """ 沒標記 severity 的用例默認為 normal"""
    print("test case 5555555555")

 

allure 報告

測試用例詳情

多了個  severity 字段

 

統計圖表

可以看到不同 severity 測試用例運行的統計數據

 

必然測試失敗的測試代碼

將上面代碼的三個測試用例故意讓它測試失敗

@allure.severity("normal")
def test_case_1():
    """ normal 級別測試用例 """
    assert (1 == 2)


@allure.severity("critical")
def test_case_2():
    """ critical 級別測試用例 """
    assert (1 == 2)


@allure.severity("blocker")
def test_case_3():
    """ blocker 級別測試用例 """
    assert (1 == 2)

 

再來看看 allure 報告的統計圖表

• 這里用的是中文報告，其實可以看到 severity 官方是翻譯為優先級，但是如果自己去翻譯軟件翻譯的話是嚴重程度，我個人更偏向於理解為優先級
• 會同時顯示同一個優先級的失敗、通過用例數，以及哪條用例是失敗、通過的

 

命令行參數 allure-severities

當然，也可以根據優先級選擇需要運行的測試用例

 

具體栗子

仍然是上面的代碼，打開 cmd

# 只運行 severity=blocker、critical 的測試用例
pytest test_severity.py -sq --alluredir=./allure --allure-severities=blocker,critical

# 寫法二
pytest test_severity.py -sq --alluredir=./allure --allure-severities blocker,critical

 

運行結果

severi=blocker、critical 的測試用例就三條，可以看看上面的代碼