软件测试系列:Pytest用例执行顺序

只有一个py文件

如果测试case只存在于单个.py文件,测试case默认从上到下执行。

可以使用pytest-ordering来控用例执行顺序。

@pytest.mark.run(order=3)
def test_01():
    print("test_01")
    time.sleep(1.0)

@pytest.mark.run(order=2)
def test_two():
    print("test_two")
    time.sleep(10)

@pytest.mark.run(order=1)
def test_regin():
    print("用例test_regin")
    time.sleep(1.5)

存在多个py文件

1、如果测试case存在于多个.py文件中,默认是按照文件名的ascii码顺序执行,进入文件后,默认按照从上到下顺序执行每个测试用例。

test_user.py  # 用户相关
    class TestUser:
        def test_user_create:
        def test_user_login:
        def test_user_delete
         
test_order.py  # 订单相关
    class TestOrder:
        def test_order_create:
        def test_order_list:
        def test_order_delete
         
test_stock.py  # 库存相关
    class TestStock:
        def test_stock_add:
        def test_stock_list:
        def test_stock_reduce

1)按照文件名ascii排序:test_order > test_stock > test_user

2)test_order_create > test_order_list > test_order_delete > test_stock_add > test_stock_list > …

2、如果单个.py测试文件中使用了pytest-order插件,那么该文件中添加了order的测试用例将会最先执行,没添加的将会按照1的顺序执行,这样就会出现测试用例的顺序在多文件中交叉执行的现象。(所以单个.py文件在使用pytest-order插件的情况下,建议每个case都带上order=x,且x不要相同)

test_user.py  # 用户相关
    class TestUser:
        @pytest.mark.run(order=1)
        def test_user_create:
        def test_user_login:
        @pytest.mark.run(order=2)
        def test_user_delete
         
test_order.py  # 订单相关
    class TestOrder:
        def test_order_create:
        def test_order_list:
        def test_order_delete
         
test_stock.py  # 库存相关
    class TestStock:
        def test_stock_add:
        def test_stock_list:
        def test_stock_reduce

1)由于test_user文件中的case使用了pytest-order插件,所以优先执行使用了order排序的 case

2)test_user_create > test_user_delete> test_order_create> … > test_stock_add > … > test_user_delete

3、如果多个.py文件使用了pytest-order插件,如每个order指定的顺序不冲突,按照order指定的顺序执行,如果有冲突,就会出现在多个.py文件中交叉执行,不符合预期的情况。

test_user.py  # 用户相关
    class TestUser:
        @pytest.mark.run(order=1)
        def test_user_create:
        def test_user_login:
        @pytest.mark.run(order=2)
        def test_user_delete
         
test_order.py  # 订单相关
    class TestOrder:
        def test_order_create:
        def test_order_list:
        def test_order_delete
         
test_stock.py  # 库存相关
    class TestStock:
        @pytest.mark.run(order=1)
        def test_stock_add:
        @pytest.mark.run(order=2)
        def test_stock_list:
        def test_stock_reduce

1)test_stock 和 test_user 存在 order 冲突,所以按照文件名ascii顺序排序

2)test_stock_add > test_user_create > test_stock_list > test_user_delete > order相关 > test_stock_reduce > test_user_login

需求:不要在多个文件中来回执行case,保证测试用例顺序为:用户模块-->订单模块-->库存模块

方式一:通过修改文件名,使得文件名ascii码排序,和测试case执行顺序一致,确保case中没有pytest-order插件

test_1_user.py  # 用户相关
    class TestUser:
        def test_user_create:
        def test_user_login:
        def test_user_delete
         
test_2_order.py  # 订单相关
    class TestOrder:
        def test_order_create:
        def test_order_list:
        def test_order_delete
         
test_3_stock.py  # 库存相关
    class TestStock:
        def test_stock_add:
        def test_stock_list:
        def test_stock_reduce

通常情况下.py文件是根据模块去命名的,所以通过修改文件名实现预期的执行顺序,并不是很友好。

方式二:如果使用pytest-order插件控制,必须保证每个文件的order值是不能重复的,后一个.py文件order最小值必须大于前一个.py文件最大值,这样就可以确保文件执行顺序。这样在增加测试用例后,就可能需要修改很多order顺序。

test_user.py  # 用户相关
    class TestUser:
        @pytest.mark.run(order=1)
        def test_user_create:
        @pytest.mark.run(order=3)
        def test_user_login:
        @pytest.mark.run(order=2)
        def test_user_delete
         
test_order.py  # 订单相关
    class TestOrder:
        @pytest.mark.run(order=4)
        def test_order_create:
        @pytest.mark.run(order=5)
        def test_order_list:
        @pytest.mark.run(order=6)
        def test_order_delete
         
test_stock.py  # 库存相关
    class TestStock:
        @pytest.mark.run(order=7)
        def test_stock_add:
        @pytest.mark.run(order=8)
        def test_stock_list:
        @pytest.mark.run(order=9)
        def test_stock_reduce

方式三:通过pytest提供的勾子方法pytest_collection_modifyitems,对case执行顺序进行修改

# conftest.py
 
def pytest_collection_modifyitems(config, items)
    # 期望用例顺序按照.py文件执行
    appoint_classes = {"TestUser": [], "TestOrder": [], "TestStock": []}
 
    for item in items:
        for cls_name in appoint_classes:
            if item.parent.name == cls_name:
                appoint_classes[cls_name].append(item)
    items.clear()
    for cases in appoint_classes.values():
        items.extend(cases)

用户只需要将其新增的测试模块class按照预期的顺序添加到appoint_classes中即可,简单灵活。

展开阅读全文

页面更新:2024-04-25

标签:顺序   测试   文件名   插件   模块   库存   冲突   订单   文件   系列   用户   软件

1 2 3 4 5

上滑加载更多 ↓
推荐阅读:
友情链接:
更多:

本站资料均由网友自行发布提供,仅用于学习交流。如有版权问题,请与我联系,QQ:4156828  

© CopyRight 2008-2024 All Rights Reserved. Powered By bs178.com 闽ICP备11008920号-3
闽公网安备35020302034844号

Top