Pytest - 在 N 次测试失败后停止测试套件

在实际场景中,一旦新版本的代码准备好部署,它首先会部署到预生产/暂存环境中。 然后在其上运行测试套件。

只有在测试套件通过时,代码才有资格部署到生产环境。 如果有测试失败,无论是一个还是多个,都不是生产环境就绪的代码。

因此,如果我们想在 n 次测试失败后立即停止测试套件的执行怎么办? 这可以在 pytest 中使用 maxfail 完成。

在 n 次测试失败后立即停止执行测试套件的语法如下 −

pytest --maxfail = <num>

使用以下代码创建文件 test_failure.py。

import pytest
import math

def test_sqrt_failure():
   num = 25
   assert math.sqrt(num) == 6

def test_square_failure():
   num = 7
   assert 7*7 == 40

def test_equality_failure():
   assert 10 == 11

执行此测试文件时,所有 3 个测试都将失败。 在这里,我们将在一次失败后停止执行测试 −

pytest test_failure.py -v --maxfail 1
test_failure.py::test_sqrt_failure FAILED
=================================== FAILURES
=================================== _______________________________________
test_sqrt_failure __________________________________________
   def test_sqrt_failure():
   num = 25
>  assert math.sqrt(num) == 6
E  assert 5.0 == 6
E  + where 5.0 = <built-in function sqrt>(25)
E  + where <built-in function sqrt>= math.sqrt
test_failure.py:6: AssertionError
=============================== 1 failed in 0.04 seconds
===============================

在上面的结果中,我们可以看到执行在一次失败时停止。