Pytest测试框架_pytest.assume(1==4)

1、pytest介绍

     （1） pytest是一个非常成熟的全功能的Python测试框架
               简单灵活，容易上手
               支持参数化
               测试用例的skip和xfail，自动失败重试等处理
               pytest具有很多第三方插件，并且可以自定义扩展，如pytest-allure(完美html测试报告生成)，pytest-xdist(多CPU分发)等
               可以很好的和jenkins集成
     （2） 文档：https://docs.pytest.org/en/latest/contents.html#toc
     （3） 第三方库：https://pypi.org/search/?q=pytest

2、pytest安装与依赖

     pip install -U pytest
     pip install pytest-sugar
     pip install pytest-rerunfailures
     pip install pytest-xdist
     pip install pytest-assume
     pip install pytest-html
     …
     pip list查看
     pytest -h 帮助

3、测试用例的识别与运行

     （1） 测试文件
          test_.py
          _test.py
     （2） 用例识别
          Test*类包含的所有test_*的方法（测试类不能带有_init_方法）
          不在class中的所有的test_*方法
     （3） pytest也可以执行unintest框架写的用例和方法
     （4） 终端执行
           pytest/py.test
           pytest -v（最高级别信息–verbose）打印详细运行日志信息
           pytest -v -s 文件名（s是带控制台输出结果，也是输出信息）
           pytest 文件名.py      执行单独一个pytest模块
           pytest 文件名.py::类名      运行某个模块里面的某个类
           pytest 文件名.py::类名::方法名     运行某个模块里面某个类里面的方法
           pytest -v -k “类名 and not 方法名”     跳过运行某个用例
           pytest -m[标记名]      @pytest.mark.[标记名]将运行有这个标记的测试用例
           pytest -x 文件名      一旦运行到报错就停止运行
           pytest -maxfail=[num]      当运行错误达到num的时候就停止运行

4、Pytest执行-失败重新运行

     （1） 场景
           测试失败后要重新运行n次，要在重新运行之间添加延迟时间，间隔n秒再运行。
     （2） 安装
           pip install pytest-rerunfailures
     （3） 执行
           pytest --reruns 3 -v -s test_class.py
           pytest -v --reruns 5 --reruns-delay 1

5、Pytest执行-多条断言有失败也都运行

     （1） 场景
           一个方法中写多条断言，通常第一条过不去，下面的就不执行了，我们想报错也执行一下。
     （2） 安装
           pip install pytest-assume
     （3） 执行
           pytest.assume(1==4)
           pytest.assume(2==4)

6、测试用例的识别与运行

     （1） pycharm配置与执行pytest测试框架

     （2） 运行方式：pytest.main([’-v’, ‘-x’, ‘testpytest.py’]) （所有的参数和pytest命令行方式是一样的）

7、Pytest框架结构

     （1） import pytest 类似的setup,teardown同样更灵活
           模块级(setup_module/teardown_module)模块始末，全局的 （优先最高）
           函数级(setup_function/teardown_function)只对函数用例生效（不在类中）
           类级(setup_class/teardown_class)只在类中前后运行一次（在类中）
           方法级(setup_method/teardown_methond)开始于方法始末（在类中）
           类里面的（setup/teardown）运行在调用方法的前后

8、Pytest-fixture的用法

     （1） 场景
           用例1需要先登录
           用例2不需要先登录
           用例3需要先登录
     （2） 这种场景无法用setup与teardown实现
     （3） 用法
           在方法前面加@pytest.fixture()
           例子1：前端自动化中应用
              场景：测试用例执行时，有的用例需要登录才能执行，有些用例不需要登录，setup和teardown无法满足。fixture可以。默认scope（范围）function
              步骤：
                 导入pytest
                 在登陆的函数上面加@pytest.fixture()
                 在要使用的测试方法中传入(登录函数名称)，就先登录
                 不传入的就不登录直接执行测试方法

import pytest
#作用域：module是在模块之前执行，模块之后执行
#@pytest.fixture(scope='module')
#或者用下面这个方法可以自动添加到每一个测试用例里面
#open这个方法还可以放入conftest.py文件中，运行的时候会自动去这个文件找这个方法
@pytest.fixture(autouse=True)
def open():
    print('打开浏览器')
    yield

    print('执行teardown！')
    print('关闭最后浏览器')

def test_case1(open):
    print('test_case1, 要登录')
    pass

def test_case2():
    print('test_case2, 不要登录')
    pass

def test_case3(open):
    print('test_case3,要登录')
    pass

if __name__ ==  '__main__':
    pytest.main(['-vs'])
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27

           例子2：前端自动化中应用-conftest
              场景：你与其他测试工程师合作一起开发时，公共模块要在不同文件中，要在大家都访问到的地方。
              解决：conftest.py这个文件进行数据共享，并且他可以放在不同位置起着不同的范围共享作用。
              执行：系统执行到参数login时先从本文件中查找是否有这个名字的变量，之后在conftest.py中找是否有
              步骤：将登陆模块带@pytest.fixture写在conftest.py
           例子3：前端自动化中应用-yield
              场景：你已经可以将测试方法前要执行的或依赖的解决了，测试方法后销毁清楚数据的要如何进行呢？范围是模块级别的。类似setupClass。
              解决：通过在同一模块中加入yield关键字，yield是调用第一次返回结果，第二次执行他下面的语句返回。
              步骤：在@pytest.fixture(scope=module),在登陆的方法中加yield，之后加销毁清除的步骤，注意，这种方式没有返回值，如果希望返回使用addfinalizer
           例子4：fixture的自动应用
              场景：不想原测试方法有任何改动，或全部都自动实现自动应用，没特例，也都不需要返回值时可以选择自动应用。
              解决：使用fixture中参数autouse=Ture实现
              步骤：在方法上面加@pytest.fixture(autouse=True)
                    在测试方法上加@pytest.mark.usefixtures(“start”)
           例子5：fixture带参数传递
              场景：测试离不开数据，为了数据灵活，一般数据都是通过参数传的
              解决：fixture通过固定参数request传递
              步骤：在fixture中增加@pytest.fixture(params=[1,2,3,‘linda’])在方法参数写request

import pytest

#参数化，前两个变量，后面是对应的数据
 3+5->test_input   8->expect
 @pytest.mark.parametrize('test_input,expected', [('3+5',8),('2+5',7),('7*5',30)])
 def test_eval(test_input,expected):
     #eval 将字符串str当成有效的表达式来求值，并返回结果
     assert eval(test_input) == expected

"""
参数组合
@pytest.mark.parametrize('x',[1,2])
@pytest.mark.parametrize('y',[8,10,11])
def test_foo(x,y):
    print(f'测试数据组合x: {x} , y: {y}')
#方法名作为参数
test_user_data = ['Tome', 'Jerry']
@pytest.fixture(scope="module")
def login_r(request):
    #这是接收并传入的参数
    user = request.param
    print(f"\n 打开首页准备登陆，  登陆用户：{user}")
    return user
#@pytest.mark.skipif(sys.platform == 'darwin', reason='不在macos上执行')
#@pytest.mark.skip('此次测试不执行登陆')
#@pytest.mark.xfail   标注可能失败或者可能成功
#@pytest.mark.备注   标注上备注
# indirect=True, 可以把传过来的参数当函数执行
@pytest.mark.parametrize("login_r", test_user_data, indirect=True)
def test_login(login_r):
    a = login_r
    print(f"测试用例中login的返回值：{a}")
    assert a != ""

if __name__ == '__main__':
    pytest.main()

"""
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38

9、mark中的skip与xfail

     Skip使用场景
           调试时不想运行这个用例
           标记无法在某平台上运行的测试功能
           在某些版本中执行，其他版本中跳过
           当前的外部资源不可用时跳过（如果测试数据是从数据库中取到的，连接数据库的功能如果返回结果未成功就跳过，因为执行也都报错）
     解决
           @pytest.mark.skip跳过这个测试用例，可以加条件skipif，在满足某些条件下才希望通过，否则跳过这个测试
      Xfail场景
           功能测试尚未实施或尚未修复的错误，当测试通过时尽管预计会失败（标记为pytest.mark.xfail），它是一个xpass，将在测试摘要中报告
          你希望测试由于某种情况而就应该失败
      解决
          @pytest.mark.xfail

10、使用自定义标记mark只执行某部分用例

     场景
           只执行符合要求的某一部分用例，可以吧一个web项目划分多个模块，然后指定模块名称执行。
           App自动化时，如果想Android和IOS公用一套代码时，也可以使用标记功能，标明哪些是IOS的用例，哪些是Android的，运行代码时指定mark名称运行就可以。
     解决
          在测试用例方法上加@pytest.mark.webtest
     执行
          -s参数：输出所有测试用的print信息 pytest -s test_mark_zi.py
          -m：执行自定义标记的相关用例 pytest -s test_mark_zi.py -m=webtest    pytest -s test_mark_zi.py -m apptest    pytest -s test_mark_zi.py -m “not ios”
     注意事项
           最好在conftest文件中添加如下代码。这样执行结果中就不会有warnings

def pytest_configure(config):
    marker_list = ['search', 'login']#标签集合名字
    for markers in marker_list:
        config.addinivalue_line(
            'markers', markers
        )
1
2
3
4
5
6

11、多线程并行与分布式执行

     场景
           测试用例1000条，一个用例执行1分钟，一个测试人员执行需要1000分钟。通常我们会人力成本换取时间成本，加几个人一起执行，时间就会缩短。如果10人一起执行只需要100分钟，这就是一种并行测试，分布式场景。
     解决
          pytest分布式执行插件：pytest-xdist,多个CPU或主机执行 前提：用例之间都是独立的，没有先后顺序，随机都能执行，可重复运行不影响其他用例。
     安装
          pip3 install pytest-xdist
          多个CPU并行执行用例，直接加-n 3是并行数量：pytest -n 3
          在多个终端下一起执行

12、pytest-html生成报告

     安装
           pip install pytest-html
     生成html报告
          pytest -v -s --html=report.html - - self-contained-html