[发明专利]一种算法能力测试方法及装置

说明书

本申请实施例提供一种算法能力测试方法及装置，涉及计算机技术领域，该方法应用于算法能力测试系统，所述方法包括：向所述第一算法的第一接口下发第一测试样本，第一接口为按照预先确定的接口测试顺序，从M个接口中确定出的待测试接口，第一测试样本为测试样本库中随机抽取的测试样本，第一测试样本包括多个测试信息；接收第一接口响应于多个测试信息中的第一测试信息的第一响应信息；根据第一响应信息，确定第一接口是否存在异常；在确定第一接口不存在异常的情况下，向第一算法的第二接口下发第一测试样本中的第二测试信息，第二接口为按照接口测试顺序所确定的待测试接口。本申请可确保算法测试的测试效果。

技术领域

本申请涉及计算机技术领域，尤其涉及一种算法能力测试方法及装置。

背景技术

目前，随着人工智能技术的发展，越来越多的需要人为处理的工作由模型（即算法）来实现。例如，在通信铁塔上搭载摄像头进行视频监控，使“通信塔”向“数字塔”转变。具体地，在摄像头上加载不同的算法为林草、水利、农业、环保等行业提供智能化的告警识别。

目前，算法测试需要依靠人工为每个算法单独编写测试用例和测试代码，这导致算法测试所需耗费的成本较大。

发明内容

本申请实施例提供一种算法能力测试方法及装置，能够解决算法测试需要依靠人工为每个算法单独编写测试用例和测试代码而导致算法测试所需耗费的成本较大的问题。

为了解决上述技术问题，本申请是这样实现的：

第一方面，本申请实施例提供一种算法能力测试方法，应用于算法能力测试系统，所述测试系统部署有第一算法，所述第一算法为预先训练的待测试算法，所述第一算法包括M个接口，所述方法包括：

向所述第一算法的第一接口下发第一测试样本，所述第一接口为按照预先确定的接口测试顺序，从所述M个接口中确定出的待测试接口，所述第一测试样本为测试样本库中随机抽取的测试样本，所述第一测试样本包括多个测试信息；

接收所述第一接口响应于所述多个测试信息中的第一测试信息的第一响应信息；

根据所述第一响应信息，确定所述第一接口是否存在异常；

在确定所述第一接口不存在异常的情况下，向所述第一算法的第二接口下发所述第一测试样本中的第二测试信息，所述第二接口为按照所述接口测试顺序所确定的待测试接口。

第二方面，本申请实施例提供一种算法能力测试装置应用于算法能力测试系统，所述测试系统部署有第一算法，所述第一算法为预先训练的待测试算法，所述第一算法包括M个接口，所述装置包括：

第一下发模块，用于向所述第一算法的第一接口下发第一测试样本，所述第一接口为按照预先确定的接口测试顺序，从所述M个接口中确定出的待测试接口，所述第一测试样本为测试样本库中随机抽取的测试样本，所述第一测试样本包括多个测试信息；

接收模块，用于接收所述第一接口响应于所述多个测试信息中的第一测试信息的第一响应信息；

确定模块，用于根据所述第一响应信息，确定所述第一接口是否存在异常；

第二下发模块，用于在确定所述第一接口不存在异常的情况下，向所述第一算法的第二接口下发所述第一测试样本中的第二测试信息，所述第二接口为按照所述接口测试顺序所确定的待测试接口。

第三方面，本申请实施例提供一种电子设备，包括：至少一个处理器；以及与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行第一方面所述的方法。

第四方面，本申请实施例提供一种存储有计算机指令的非瞬时计算机可读存储介质，所述计算机指令用于使所述计算机执行根据第一方面所述的方法。