pytest:使用参数的笛卡尔积进行参数化测试

Question

只是想知道,有没有(更多)优雅的方式参与笛卡尔积？这是我到目前为止所发现的:

numbers    = [1,2,3,4,5]
vowels     = ['a','e','i','o','u']
consonants = ['x','y','z']

cartesian = [elem for elem in itertools.product(*[numbers,vowels,consonants])]

@pytest.fixture(params=cartesian)
def someparams(request):
  return request.param

def test_something(someparams):
  pass

至少我想在夹具功能中封装数字,元音,辅音和笛卡儿.

Answer 1

您可以应用多个parametrize参数,在这种情况下,它们将生成所有参数的乘积:

import pytest

numbers = [1,2,3,4,5]
vowels = ['a','e','i','o','u']
consonants = ['x','y','z']


@pytest.mark.parametrize('number', numbers)
@pytest.mark.parametrize('vowel', vowels)
@pytest.mark.parametrize('consonant', consonants)
def test(number, vowel, consonant):
    pass

Answer 2

我可以想到两种方法来做到这一点.一个使用参数化夹具,一个参数化测试功能.这取决于你找到哪一个更优雅.

这是参数化的测试函数:

import itertools
import pytest

numbers = [1,2,3,4,5]
vowels = ['a','e','i','o','u']
consonants = ['x','y','z']


@pytest.mark.parametrize('number,vowel,consonant',
    itertools.product(numbers, vowels, consonants)
)
def test(number, vowel, consonant):
    pass

值得注意的是,参数化装饰器的第二个参数可以是可迭代的,而不仅仅是一个列表.

以下是通过参数化每个夹具来实现的方法:

import pytest

numbers = [1,2,3,4,5]
vowels = ['a','e','i','o','u']
consonants = ['x','y','z']


@pytest.fixture(params=numbers)
def number(request):
    return request.param

@pytest.fixture(params=vowels)
def vowel(request):
    return request.param

@pytest.fixture(params=consonants)
def consonant(request):
    return request.param


def test(number, vowel, consonant):
    pass

你的直觉是正确的.通过参数化多个灯具中的每一个,pytest负责创建出现的所有排列.

测试输出完全相同.这是一个示例(我使用-vv选项运行py.test):

test_bar.py:22: test[1-a-x] PASSED
test_bar.py:22: test[1-a-y] PASSED
test_bar.py:22: test[1-a-z] PASSED
test_bar.py:22: test[1-e-x] PASSED
test_bar.py:22: test[1-e-y] PASSED
test_bar.py:22: test[1-e-z] PASSED
test_bar.py:22: test[1-i-x] PASSED

Answer 3

我认为除了一个优雅的解决方案之外，您还应该考虑每个选项将花费的时间和您必须维护的代码量。

可能的解决方案

1. parametrize与 itertools 一起使用一次（由 Frank T 提供）
2. 使用 3 个灯具（由 Frank T 提供）
3. 使用parametrize3次（Bruno Oliveira提供）
4. 使用 1 个夹具和 itertools（在问题中提供）

解决方案1

@pytest.mark.parametrize('number, vowel, consonant',
                         itertools.product(numbers, vowels, consonants))
def test(number, vowel, consonant):
    pass

解决方案2

@pytest.fixture(params=numbers)
def number(request): return request.param

@pytest.fixture(params=vowels)
def vowel(request): return request.param

@pytest.fixture(params=consonants)
def consonant(request): return request.param


def test(number, vowel, consonant):
    pass

解决方案3

@pytest.mark.parametrize('number', numbers)
@pytest.mark.parametrize('vowel', vowels)
@pytest.mark.parametrize('consonant', consonants)
def test(number, vowel, consonant):
    pass

解决方案4

@pytest.fixture(params=cartesian)
def someparams(request):
  return request.param

def test_something(someparams):
  pass

说到优雅，我认为解决方案 3是最好的选择，因为它的代码维护较少，并且不需要导入itertools. 之后，解决方案 1是最佳选择，因为您不需要将固定装置编写为解决方案 4和解决方案 2。解决方案 4可能比解决方案 2更好，因为它需要更少的代码来维护。

在性能方面，我使用 运行每个解决方案numbers = list(range(100))，并得到以下结果：

|  Solution  |  Time    | 
| Solution 1 |  3.91s   |
| Solution 2 |  3.59s   |
| Solution 3 |  3.54s   |
| Solution 4 |  3.09s   |