当用例执行完成后,希望获取到执行的结果,方便了解用例的执行情况,这时候就可以使用 pytest_terminal_summary 来进行测试结果的统计(可以拿到所有的执行结果)。
pytest_terminal_summary 源码:
参数:
terminalreporter(内部使用的终端测试报告对象)
exitstatus(返回给操作系统的返回码)
config(pytest 的 config 对象)
示例一:正常情况
创建conftest.py文件,pytest_terminal_summary函数用于收集测试结果。
脚本代码:
#!/usr/bin/env python
# -*- coding: utf-8 -*-
"""
微信公众号:AllTests软件测试
"""
import time
def pytest_terminal_summary(terminalreporter, exitstatus, config):
"""
收集测试结果
"""
print(terminalreporter.stats)
print("total:", terminalreporter._numcollected)
print('passed:', len([i for i in terminalreporter.stats.get('passed', []) if i.when != 'teardown']))
print('failed:', len([i for i in terminalreporter.stats.get('failed', []) if i.when != 'teardown']))
print('error:', len([i for i in terminalreporter.stats.get('error', []) if i.when != 'teardown']))
print('skipped:', len([i for i in terminalreporter.stats.get('skipped', []) if i.when != 'teardown']))
print('成功率:%.2f' % (len(terminalreporter.stats.get('passed', []))/terminalreporter._numcollected*100)+'%')
# terminalreporter._sessionstarttime 会话开始时间
duration = time.time() - terminalreporter._sessionstarttime
print('total times:', duration, 'seconds')
创建test_a.py文件
脚本代码:
#!/usr/bin/env python
# -*- coding: utf-8 -*-
"""
微信公众号:AllTests软件测试
"""
import pytest
def test_a1():
print("测试用例test_a1")
assert 1 == 1
def test_a2():
print("测试用例test_a2")
@pytest.mark.skip("跳过test_a3")
def test_a3():
print("测试用例test_a3")
assert 1 == 1
def test_a4():
print("测试用例test_a4")
assert 1 == 2
创建test_b.py文件
脚本代码:
#!/usr/bin/env python
# -*- coding: utf-8 -*-
"""
微信公众号:AllTests软件测试
"""
def test_b1():
print("测试用例test_b1")
def test_b2():
print("测试用例test_b2")
assert 1 == 2
打开命令行,输入执行命令
pytest -s
运行结果:
获取到的测试用例执行状态打印到控制台。
示例二:setup 异常情况
修改test_b.py文件
脚本代码:
#!/usr/bin/env python
# -*- coding: utf-8 -*-
"""
微信公众号:AllTests软件测试
"""
import pytest
@pytest.fixture(scope="function")
def my_setup():
assert 1 == 2
def test_b1(my_setup):
print("测试用例test_b1")
def test_b2():
print("测试用例test_b2")
assert 1 == 2
打开命令行,输入执行命令
pytest -s
运行结果:
setup报错,结果标记为error。
示例三:teardown 异常情况
修改test_b.py文件
脚本代码:
#!/usr/bin/env python
# -*- coding: utf-8 -*-
"""
微信公众号:AllTests软件测试
"""
import pytest
@pytest.fixture(scope="function")
def my_teardown():
yield
assert 1 == 2
def test_b1(my_teardown):
print("测试用例test_b1")
def test_b2():
print("测试用例test_b2")
assert 1 == 2
打开命令行,输入执行命令
pytest -s
运行结果:
用例总数是6,但是测试报告状态结果为2 failed, 3 passed, 1 skipped, 1 error,合计为7。
从获取的terminalreporter.stats信息可以看出:
passed里when = 'call'时,统计一次test_b1用例
error里when = 'teardown'时,又统计一次test_b1用例
所以报告结果合计为7。
但因为when='teardown'是测试用例的后置操作,一般用于数据的清理等操作,如报错不影响测试用例的执行结果,所以在conftest.py文件里
pytest_terminal_summary函数获取测试结果进行了忽略统计。
注:
when='teardown'是测试用例的后置操作,一般用于数据的清理等操作,如报错不影响测试用例的执行结果,可以忽略。
但是如果想与测试报告结果保持一致(即报错都要统计)
修改conftest.py文件
脚本代码:
#!/usr/bin/env python
# -*- coding: utf-8 -*-
"""
微信公众号:AllTests软件测试
"""
import time
def pytest_terminal_summary(terminalreporter, exitstatus, config):
"""
收集测试结果
"""
print(terminalreporter.stats)
print("total:", terminalreporter._numcollected)
print('passed:', len(terminalreporter.stats.get('passed', [])))
print('failed:', len(terminalreporter.stats.get('failed', [])))
print('error:', len(terminalreporter.stats.get('error', [])))
print('skipped:', len(terminalreporter.stats.get('skipped', [])))
# terminalreporter._sessionstarttime 会话开始时间
duration = time.time() - terminalreporter._sessionstarttime
print('total times:', duration, 'seconds')
再次运行用例,运行结果:
抓取的测试结果与用例执行后的状态结果一致。