[发明专利]不稳定测试用例的处理方法、装置、设备和存储介质在审
申请号: | 202111639621.0 | 申请日: | 2021-12-29 |
公开(公告)号: | CN114416535A | 公开(公告)日: | 2022-04-29 |
发明(设计)人: | 薛大伟;田成;闫欣 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G06F11/36 | 分类号: | G06F11/36 |
代理公司: | 北京鸿德海业知识产权代理有限公司 11412 | 代理人: | 田宏宾 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 不稳定 测试 处理 方法 装置 设备 存储 介质 | ||
1.一种不稳定测试用例的处理方法,包括:
获取测试用例的至少一组测试运行数据,所述至少一组测试运行数据中各组测试运行数据包括:测试结果和重试信息;
基于所述至少一组测试运行数据的组数、所述测试结果和所述重试信息,确定不稳定概率值,所述不稳定概率值用于确定所述测试用例是否为不稳定测试用例;
若所述不稳定概率值大于预设阈值,确定所述测试用例为不稳定测试用例。
2.根据权利要求1所述的方法,其中,所述获取测试用例的至少一组测试运行数据,包括:
从所述测试用例的历史运行记录中,获取至少一组历史测试运行数据,作为所述至少一组测试运行数据。
3.根据权利要求1所述的方法,其中,所述不稳定概率值与所述测试结果为成功的概率值成反比,且与所述测试结果为成功且发生重试的概率值成正比。
4.根据权利要求3所述的方法,其中,所述基于所述至少一组测试运行数据的组数、所述测试结果和所述重试信息,确定不稳定概率值,包括:
基于所述组数和所述测试结果为成功的次数,确定第一概率值,所述第一概率值为所述测试结果为成功的概率值;
基于所述组数、所述测试结果为成功且所述重试信息表明发生重试的次数,确定第二概率值,所述第二概率值为所述测试结果为成功且发生重试的概率值;
确定所述第二概率值与所述第一概率值的比值,将所述比值作为所述不稳定概率值。
5.根据权利要求4所述的方法,其中,所述基于所述组数和所述测试结果为成功的次数,确定第一概率值,包括:
将所述测试结果为成功的次数与所述组数的比值,确定为所述第一概率值。
6.根据权利要求4所述的方法,其中,所述基于所述组数、所述测试结果为成功且所述重试信息表明发生重试的次数,确定第二概率值,包括:
将所述测试结果为成功且所述重试信息表明发生重试的次数,与所述组数的比值,确定为所述第二概率值。
7.根据权利要求1-6任一项所述的方法,还包括:
若所述测试用例为不稳定测试用例,对所述不稳定测试用例进行隔离处理。
8.一种不稳定测试用例的处理装置,包括:
获取模块,用于获取测试用例的至少一组测试运行数据,所述至少一组测试运行数据中各组测试运行数据包括:测试结果和重试信息;
第一确定模块,用于基于所述至少一组测试运行数据的组数、所述测试结果和所述重试信息,确定不稳定概率值,所述不稳定概率值用于确定所述测试用例是否为不稳定测试用例;
第二确定模块,用于若所述不稳定概率值大于预设阈值,确定所述测试用例为不稳定测试用例。
9.根据权利要求8所述的装置,其中,所述获取模块进一步用于:
从所述测试用例的历史运行记录中,获取至少一组历史测试运行数据,作为所述至少一种测试运行数据。
10.根据权利要求8所述的装置,其中,所述不稳定概率值与所述测试结果为成功的概率值成反比,且与所述测试结果为成功且发生重试的概率值成正比。
11.根据权利要求10所述的装置,其中,所述第一确定模块进一步用于:
基于所述组数和所述测试结果为成功的次数,确定第一概率值,所述第一概率值为所述测试结果为成功的概率值;
基于所述组数、所述测试结果为成功且所述重试信息表明发生重试的次数,确定第二概率值,所述第二概率值为所述测试结果为成功且发生重试的概率值;
确定所述第二概率值与所述第一概率值的比值,将所述比值作为所述不稳定概率值。
12.根据权利要求11所述的装置,其中,所述第一确定模块进一步用于:
将所述测试结果为成功的次数与所述组数的比值,确定为所述第一概率值。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111639621.0/1.html,转载请声明来源钻瓜专利网。