[发明专利]评估自动化测试应用水平的方法及相关设备

权利要求书

1.一种评估自动化测试应用水平的方法，其特征在于，包括：

获取自动化测试应用的多个测试流程；

对各个测试流程进行脚本对应，根据脚本对应结果确定各个测试流程的验证可自动化率；

根据所述各个测试流程的验证可自动化率计算全体测试流程的最大可自动化率；

基于各个测试流程的验证测试的验证可自动化率、最大可自动化率以及验证测试的测试数据构建验证测试统计表；

对各个测试流程进行实际测试，统计预定时间段内实际测试中各个测试流程的实际可自动化率，并基于所述各个测试流程的实际可自动化率以及实际测试的测试数据构建实际测试统计表；

根据所述验证测试统计表和所述实际测试统计表确定评估结果。

2.根据权利要求1所述的方法，其特征在于，所述对各个测试流程进行脚本对应，根据脚本对应结果确定各个测试流程的验证可自动化率，包括：

调取各个测试流程对应的验证测试样本集，确定每个测试流程对应的验证测试样本集与自动化脚本的对应脚本关系；

根据每个对应脚本关系，计算每个自动化脚本的验证自动化替代率；

对所述验证自动化替代率进行加权处理，得到每个测试流程的验证可自动化率。

3.根据权利要求2所述的方法，其特征在于，所述根据每个对应脚本关系，计算每个自动化脚本的验证自动化替代率，包括：

根据每个测试流程的验证测试样本集的对应脚本关系，确定每个自动化脚本对应的测试案例的自动化覆盖数据，其中，所述自动化覆盖数据包括：自动化已覆盖或自动化未覆盖；

根据所述自动化覆盖数据，计算每个自动化脚本的验证自动化替代率p1，

p1＝n1/N1，其中，n1为每个测试流程的验证测试样本集中自动化已覆盖案例数，N1为每个测试流程的验证测试样本集的总案例数。

4.根据权利要求2所述的方法，其特征在于，根据所述各个测试流程的验证可自动化率计算全体测试流程的最大可自动化率，包括：

以每个测试流程的验证测试样本集中包含的验证测试用例数为权重，对所述验证自动化替代率计算加权平均数，得到全体测试流程的最大可自动化率。

5.根据权利要求1所述的方法，其特征在于，所述验证测试的测试数据，包括下列至少之一：

验证测试样本数、自动化脚本数、自动化样本比重、测试流程的验证测试案例总数和权重。

6.根据权利要求1所述的方法，其特征在于，所述对各个测试流程进行实际测试，统计预定时间段内实际测试中各个测试流程的实际可自动化率，并基于所述各个测试流程的实际可自动化率以及实际测试的测试数据构建实际测试统计表，包括：

调取各个测试流程对应的实际测试样本，确定每个测试流程对应的实际测试样本与自动化脚本的实际对应脚本关系；

根据每个实际对应脚本关系，计算每个自动化脚本的实际可自动化率；

对所述实际可自动化率进行加权处理，得到每个测试流程的实际自动化替代率；

将统计的预定时间段内的各个测试流程的实际可自动化率以及实际测试的测试数据，构建实际测试统计表。

7.根据权利要求6所述的方法，其特征在于，所述实际的测试数据包括下列至少之一：

测试版本、测试开始时间、测试报告提交时间、实际测试样本数、测试案例数、是否使用自动化和测试报告中采用自动化数据的样本数。