[发明专利]一种软件测试方法和装置

说明书

本发明实施例提供了一种软件测试方法和装置，所述方法包括：对待测试软件进行至少一次的测试；获取每次测试的测试结果，并判断所述测试结果是否满足有效性条件；若存在任一次的测试结果不满足有效性条件，则对所述待测试软件重新进行测试，直至测试结果满足有效性条件；当满足有效性条件的测试结果的数目达到预设数目阈值时，停止测试并根据满足有效性条件的测试结果，判断所述待测试软件是否通过测试。在本发明实施例中，在对软件进行测试时，对软件的测试结果进行有效性判断。可以有效消除在不稳定系统中对软件进行测试时，由非软件引起的不稳定因素对测试结果的影响。

技术领域

本发明涉及计算机技术领域，特别是涉及一种软件测试方法和一种软件测试装置。

背景技术

软件测试是指在规定的条件下对程序进行操作，以发现程序错误，衡量软件质量，并对其是否能满足设计要求进行评估的过程。

在软件测试过程中，由于系统(包括硬件层面和底层软件层面)的不稳定性，可能会对被测软件的执行结果产生影响。有些错误是由于底层系统的问题，但是在软件测试的过程中却被发现为错误。这会影响软件测试的结果，甚至产生错误测试结论，以致误导后续的软件开发过程。

发明内容

鉴于上述问题，提出了本发明实施例以便提供一种克服上述问题或者至少部分地解决上述问题的一种软件测试方法和相应的一种软件测试装置。

为了解决上述问题，本发明实施例公开了一种软件测试方法，包括：

对待测试软件进行至少一次的测试；

获取每次测试的测试结果，并判断所述测试结果是否满足有效性条件；其中，所述有效性条件是指预先设定的用于判定测试结果为有效结果的条件，所述有效结果是指由待测试软件引起的结果；

若存在任一次的测试结果不满足有效性条件，则对所述待测试软件重新进行测试，直至测试结果满足有效性条件；

当满足有效性条件的测试结果的数目达到预设数目阈值时，停止测试并根据满足有效性条件的测试结果，判断所述待测试软件是否通过测试。

优选的，所述测试结果包括：成功、失败和错误；所述判断测试结果是否满足有效性条件的步骤包括：

若所述测试结果为成功或失败，则确定所述测试结果满足有效性条件；

若所述测试结果为错误，则判断所述测试结果是否属于由待测试软件引起的错误；

若所述测试结果属于由待测试软件引起的错误，则确定所述测试结果满足有效性条件；

若所述测试结果不属于由待测试软件引起的错误，则确定所述测试结果不满足有效性条件。

优选的，所述判断测试结果是否属于由待测试软件引起的错误的步骤包括：

判断所述测试结果是否属于第一错误列表中包含的错误或属于第二错误列表中包含的错误；所述第一错误列表中记录有由待测试软件引起的错误，所述第二错误列表中记录有由非待测试软件引起的错误；

若所述测试结果是属于第一错误列表中包含的错误，则确定所述测试结果为由待测试软件引起的错误；

若所述测试结果是属于第二错误列表中包含的错误，则确定所述测试结果为由非待测试软件引起的错误。

优选的，所述判断测试结果是否属于由待测试软件引起的错误的步骤还包括：

若所述测试结果不属于第一错误列表中包含的错误或第二错误列表中包含的错误，则生成判断通知消息；

接收针对所述判断通知消息返回的判断结果；

依据所述判断结果，将所述测试结果所表征的错误添加到所述第一错误列表中或所述第二错误列表中。