公众号搜索:TestingStudio 霍格沃兹测试开发的干货都很硬核
测试报告在项目中是至关重要的角色,一个好的测试报告:
所以打造一个美观、一目了然的测试报告,清晰的反应质量问题,并提供给相关人员了解项目的整体状态,是非常必要的。
Allure 框架是一种灵活的、轻量级、支持多语言测试报告工具,它不仅能够以简洁的 Web 报告形式显示已测试的内容,而且允许参与开发过程的每个人从测试的日常执行中提取最大限度的有用信息。同时支持多种语言包括 Java、Python、JavaScript、Ruby、Groovy、PHP、.Net、 Scala。
Mac 可以使用 brew 安装 allure,安装命令如下:
其他操作系统请参考:
与 pytest 结合需要安装 allure-pytest 插件:
查看 Allure 版本:
第一步 :在 pytest 执行测试的时候,指定参数 --alluredir 选项及结果数据保存的目录,代码如下:
tmp/my_allure_results 中保存了本次测试的结果数据。
第二步 :打开报告,需要启动 allure 服务,在 terminal 中输入 allure serve [path/to/allure_results],代码如下:
也可以使用 allure generate 生成 HTML 格式的测试结果报告,并使用 allure open 来打开报告。
上面的命令将 ./result/ 目录下的测试数据生成HTML测试报告到 ./report 路径下,-–clean 选项目的是先清空测试报告目录,再生成新的测试报告,然后使用下面的命令打开报告。
上面这个命令则会启动一个 Web 服务将已经生成的测试报告打开。打开生成的测试报告,在默认的浏览器打开测试报告,报告如下:
上面的测试报告首页中展示了此次测试的测试用例数量以及成功用例、失败用例、跳过用例的比例、测试环境、SUITES、FEATURES BY STORIES 等基本信息。当与 Jenkins 做了持续置成后,TREND 区域还将显示,历次测试的通过情况。
首页的左边栏,还从不同的维度展示测试报告的其他信息。重点页面介绍:
在实际项目中,一旦用例报错,我们希望能够将当时应用的状态记录下来,记录这些状态的方式可以是日志、截图、视频等手段,并将这些记录在测试报告中,方便相关人员定位问题。我们基于 Pytest 与 Allure 结合生成测试报告来实现这个目标。
以百度 Web 网页版本测试为例,百度首页呈现的功能:新闻、网页、贴吧、知道、音乐、图片、视频、地图等,我们以百度网页的搜索功能为例, 使用 Allure、pytest 结合 Selenium 自动化测试框架,完成一个搜索功能的测试 。
为了模拟百度搜索功能场景,这里需要创建两个文件,数据文件与用例文件。首先创建数据管理文件 data/data.yml,代码如下:
然后,创建用例文件名为 test_baidudemo.py,代码如下:
代码解析:
执行:
测试结果图:
上面的测试报告展示运行时间,时长,用例数,通过率,以及测试套件 SUITES,环境等信息。
点击左侧栏最下方的 Package 可以看到所有的测试用例以及测试数据,点击一条用例右侧会展示出用例的优先级,数据,测试步骤以及每个步骤的的名称及附加的图片等信息。这里添加了一个测试用例的链接,可以与测试用例的管理链接关联起来,方便后期统计覆盖率。
另外,pytest 与 Allure 也可以与 Jenkins 集成,实现自动化测试的持续集成。更多测试开发实战进阶技巧,推荐学习霍格沃兹《测试开发实战进阶》课程。
评论留言