1

我的测试需要 2 分钟才能运行:

$ py.test
================================================= test session starts =================================================
platform linux2 -- Python 2.7.8 -- py-1.4.24 -- pytest-2.5.2
plugins: cov, xdist
collected 2249 items 

«lots of file names»
====================================== 2242 passed, 7 skipped in 120.01 seconds =======================================

…所以我想我会尝试使用xdist插件并行运行它们。所以我做了:

$ pip install pytest-xdist
$ py.test -n 2
================================================= test session starts =================================================
platform linux2 -- Python 2.7.8 -- py-1.4.24 -- pytest-2.5.2
plugins: cov, xdist
gw0 [2249] / gw1 [2249]
scheduling tests via LoadScheduling

==================================================  in 2.65 seconds ===================================================

2 秒将是一个了不起的加速......虽然我有点认为没有运行测试 - 会出现一些点,不是吗?但是,如果我只使用一个进程“并行”运行……</p>

$ py.test -n 1
================================================= test session starts =================================================
platform linux2 -- Python 2.7.8 -- py-1.4.24 -- pytest-2.5.2
plugins: cov, xdist
gw0 [2249]
scheduling tests via LoadScheduling
....«lots and lots of dots»........
====================================== 2242 passed, 7 skipped in 122.27 seconds =======================================

……然后时间恢复正常。

如何使xdist插件实际运行测试?

更新:

布鲁诺奥利维拉问题的答案:

$ py.test -n 4 -vv
============================= test session starts ==============================
platform linux2 -- Python 2.7.8 -- py-1.4.24 -- pytest-2.5.2 -- /home/liori/proj/.ve/bin/python2
plugins: cov, xdist
[gw0] linux2 Python 2.7.8 cwd: /home/liori/proj/src
[gw1] linux2 Python 2.7.8 cwd: /home/liori/proj/src
[gw2] linux2 Python 2.7.8 cwd: /home/liori/proj/src
[gw3] linux2 Python 2.7.8 cwd: /home/liori/proj/src
[gw0] Python 2.7.8 (default, Aug 23 2014, 21:00:50)  -- [GCC 4.9.1]
[gw1] Python 2.7.8 (default, Aug 23 2014, 21:00:50)  -- [GCC 4.9.1]
[gw2] Python 2.7.8 (default, Aug 23 2014, 21:00:50)  -- [GCC 4.9.1]
[gw3] Python 2.7.8 (default, Aug 23 2014, 21:00:50)  -- [GCC 4.9.1]
gw0 [2254] / gw1 [2254] / gw2 [2254] / gw3 [2254]
scheduling tests via LoadScheduling

===============================  in 4.63 seconds ===============================
4

2 回答 2

2

正如 Marek 所建议的,我没有使用随机值来参数化我的测试。然而,他的建议促使我检查另一个假设,这似乎是正确的:xdist要求测试的参数化始终以相同的顺序生成。

在我的具体情况下,我通过迭代一个set字符串来生成参数化。但是,此迭代取决于字符串散列到的特定值,并且每个进程的这些值可能不同。因此,虽然我总是生成完全相同的参数化,但它们的顺序不同。

一个显示问题的简单测试用例:

import pytest

my_names = {'john', 'kate', 'alfred', 'paul', 'mary'}

@pytest.mark.parametrize('name', list(my_names), ids=list(my_names))
def test_is_name_short(name):
    assert len(name) < 7

运行PYTHONHASHSEED=random py.test -n 4以确保触发字符串的随机散列。

一个简单的解决方法是对测试强制执行特定的排序,例如通过某些参数对它们进行排序:

my_names = sorted(my_names)

我已向 py.test 的 bugtracker 提交了一个建议,以进行xdist排序参数化以进行比较以避免此问题。

于 2014-09-23T13:45:26.817 回答
1

对我来说,我注意到了类似的问题:)

您的测试是否以某种方式随机参数化?如果是,请查看py.test with xdist is not execution tests parametrized with random values

在你和我的情况下,它实际上都没有跳过(如果它真的被跳过了,那么你会在摘要中跳过 X)

于 2014-09-23T10:02:37.960 回答