[发明专利]提升大规模样本测试效率的自动化测试方法及系统

说明书

本发明特别涉及一种提升大规模样本测试效率的自动化测试方法及系统，其中该方法包括如下步骤：根据标签之间的关联为标签添加依赖关系，具有依赖关系的标签构成一组标签；为样本添加标签，针对任一组标签最多只有一个标签添加至某个样本上；对样本进行测试得到测试结果，测试过程中，若待测试样本和某个已测试样本的标签和测试结果均存在依赖关系，则将该已测试样本的测试结果作为待测试样本的测试结果。通过样本标签，深入挖掘样本测试结果之间的关联，提出了标签依赖关系以及测试结果依赖关系，在样本测试之前予以判断，从而直接为有依赖关系的样本赋予测试结果，在实际执行时，可跳过一部分样本的测试，大幅节约测试时间，提高测试效率。

技术领域

本发明涉及大规模样本测试技术领域，特别涉及一种提升大规模样本测试效率的自动化测试方法及系统。

背景技术

为了验证算法的效果，常需要准备大量样本，根据算法对样本的处理结果来评估算法的效果。比如我司屏幕拍摄泄密溯源取证系统，通过在屏幕上添加不可见的隐形水印，当屏幕被拍摄或截屏泄露后，可根据泄露的图片溯源出水印信息，从而确定泄露源。隐形水印提取成功与否，是衡量该系统的一个重要指标，该系统在不断的升级和迭代中，我们就需要对水印提取算法进行测试。

在当前的测试过程中，常规的做法如图1所示，首先通过人工对样本进行拆分，拆分后得到多个样本子集，其次，通过多个测试线程和样本提取服务终端来分别对拆分后的样本子集进行测试，最后统计多个样本提取服务终端的测试结果。这种测试方法存在诸多不足：其一，人工对样本进行拆分，拆分的不够均匀，很容易出现样本提取服务终端闲置的情况；其二，所有的样本都会被测试，对于某些测试耗时较多的算法来说，完成所有测试需要消耗大量的时间。因此急需一种可以提升大规模样本测试效率的测试方法来避免上述不足。

发明内容

本发明的首要目的在于提供一种提升大规模样本测试效率的自动化测试方法，能够高效快速的实现大规模样本的测试。

为实现以上目的，本发明采用的技术方案为：一种提升大规模样本测试效率的自动化测试方法，包括如下步骤：根据标签之间的关联为标签添加依赖关系，具有依赖关系的标签构成一组标签；为样本添加标签，针对任一组标签最多只有一个标签添加至某个样本上；对样本进行测试得到测试结果，测试过程中，若待测试样本和某个已测试样本的标签和测试结果均存在依赖关系，则将该已测试样本的测试结果作为待测试样本的测试结果。

本发明的另一个目的在于提供一种提升大规模样本测试效率的自动化测试系统，能够高效快速的实现大规模样本的测试。

为实现以上目的，本发明采用的技术方案为：一种提升大规模样本测试效率的自动化测试系统，包括：标签配置模块，根据标签之间的关联为标签添加依赖关系，具有依赖关系的标签构成一组标签；标签添加模块，用于为样本添加标签，针对任一组标签最多只有一个标签添加至某个样本上；样本测试模块，用于对样本进行测试得到测试结果，测试过程中，若待测试样本和某个已测试样本的标签和测试结果均存在依赖关系，则将该已测试样本的测试结果作为待测试样本的测试结果。

与现有技术相比，上述方法及系统存在以下技术效果：通过样本标签，深入挖掘样本测试结果之间的关联，提出了标签依赖关系以及测试结果依赖关系两种关系，并且可以在样本测试之前予以判断，从而直接为有依赖关系的样本赋予测试结果，在实际执行时，可跳过一部分样本的测试，大幅节约测试时间，提高测试效率。

附图说明

图1是现有技术中常规的大规模样本测试流程图；

图2是本发明总的流程图；

图3是本发明中对样本进行测试的实施例一的步骤流程图；

图4是本发明中对样本进行测试的实施例一的样本处理流程图；

图5是本发明中对样本进行测试的实施例二的步骤流程图；

图6是本发明中对样本进行测试的实施例二的样本处理流程图；