[发明专利]评估自动化测试应用水平的方法及相关设备

说明书

本申请提供一种评估自动化测试应用水平的方法及相关设备。其中，方法包括：获取自动化测试应用的多个测试流程；对各个测试流程进行脚本对应，根据脚本对应结果确定各个测试流程的验证可自动化率；根据各个测试流程的验证可自动化率计算全体测试流程的最大可自动化率；基于各个测试流程的验证测试的验证可自动化率、最大可自动化率以及验证测试的测试数据构建验证测试统计表；对各个测试流程进行实际测试，统计预定时间段内实际测试中各个测试流程的实际可自动化率，并基于各个测试流程的实际可自动化率以及实际测试的测试数据构建实际测试统计表；根据验证测试统计表和实际测试统计表确定评估结果。能够准确、真实的反映自动化测试的应用水平。

技术领域

本申请涉及数据测试技术领域，尤其涉及一种评估自动化测试应用水平的方法及相关设备。

背景技术

软件测试是根据软件开发各阶段的规格说明和程序的内部结构而精心设计一批测试用例(即输入数据及其预期的输出结果)，并利用这些测试用例去运行程序，以发现程序错误的过程。

而自动化测试是借助于测试工具、测试规范，从而局部或全部代替人工进行测试及提高测试效率的过程。自动测试相对于手工测试而言，其主要进步在于自动测试工具的引入。自动化测试的一般定义为：各种测试活动的管理与实施，包括测试脚本的开发与执行，以便使用某种自动测试工具来验证测试需求。测试活动的自动化在许多情况下可以获得最大的实用价值，尤其在自动测试的测试用例开发和组装阶段，测试脚本被重复调用，可重用脚本可能运行很多次。因此，采用自动测试可以获得很高的回报。

目前评估自动化测试应用效果时通常是通过统计测试案例中自动化实现的占比，大多是以系统维度统计。用例的可自动化率与实际执行时的自动化率没有明确区分。

发明内容

有鉴于此，本申请的目的在于提出一种评估自动化测试应用水平的方法及相关设备用以解决或部分解决上述技术问题。

基于上述目的，本申请第一方面提供了一种评估自动化测试应用水平的方法，包括：

获取自动化测试应用的多个测试流程；

对各个测试流程进行脚本对应，根据脚本对应结果确定各个测试流程的验证可自动化率；

根据所述各个测试流程的验证可自动化率计算全体测试流程的最大可自动化率；

基于各个测试流程的验证测试的验证可自动化率、最大可自动化率以及验证测试的测试数据构建验证测试统计表；

对各个测试流程进行实际测试，统计预定时间段内实际测试中各个测试流程的实际可自动化率，并基于所述各个测试流程的实际可自动化率以及实际测试的测试数据构建实际测试统计表；

根据所述验证测试统计表和所述实际测试统计表确定评估结果。

本申请的第二方面，提供了一种评估自动化测试应用水平的装置，包括：

流程获取模块，被配置为获取自动化测试应用的多个测试流程；

验证测试模块，被配置为对各个测试流程进行脚本对应，根据脚本对应结果确定各个测试流程的验证可自动化率；

最大可自动化率计算模块，被配置为根据所述各个测试流程的验证可自动化率计算全体测试流程的最大可自动化率；

验证测试统计模块，被配置为基于各个测试流程的验证测试的验证可自动化率、最大可自动化率以及验证测试的测试数据构建验证测试统计表；

实际测试统计模块，被配置为对各个测试流程进行实际测试，统计预定时间段内实际测试中各个测试流程的实际可自动化率，并基于所述各个测试流程的实际可自动化率以及实际测试的测试数据构建实际测试统计表；

评估结果确定模块，被配置为根据所述验证测试统计表和所述实际测试统计表确定评估结果。