[发明专利]数据集安全测试方法、装置及存储介质

权利要求书

1.一种数据集安全测试方法，应用于数据集安全测试系统中的业务服务器，所述安全测试系统包括中继服务器和至少一个终端设备，其特征在于，所述业务服务器中存储有至少一个用于测试模型的数据集，所述方法包括：

从所述中继服务器接收来自所述终端设备的模型测试请求；其中，所述模型测试请求中包括数据集路径、测试模型路径和测试模型镜像名称；

获取与所述模型测试请求对应的数据样本集和测试模型镜像；

基于所述数据样本集对所述测试模型镜像进行模型测试，得到样本测试结果集；

若确定所述样本测试结果集中存在误拒样本，基于误拒样本确定误拒样本集；其中，所述误拒样本集中每一误拒样本对应的样本测试结果与数据标注结果不同；

将所述误拒样本集存储至预设的第一存储区域；

从所述中继服务器接收到来自所述终端设备的第一数据下载请求后，基于所述第一数据下载请求在所述第一存储区域中获取所述误拒样本集并发送至所述中继服务器；其中，所述第一数据下载请求通过所述中继服务器验证；

所述第一数据下载请求在所述终端设备中生成并发送至所述中继服务器，且通过所述中继服务器验证；若所述中继服务器接收到所述终端设备发送的第一数据下载请求，且所述第一数据下载请求通过验证，所述中继服务器将所述第一数据下载请求发送至所述业务服务器；

所述若所述中继服务器接收到所述终端设备发送的第一数据下载请求，且所述第一数据下载请求通过验证，所述中继服务器将所述第一数据下载请求发送至所述业务服务器，包括：

所述中继服务器获取IP地址白名单；

若确定所述第一数据下载请求中的IP地址属于所述IP地址白名单，判定所述第一数据下载请求通过验证，且所述中继服务器将所述第一数据下载请求发送至所述业务服务器。

2.根据权利要求1所述的方法，其特征在于，所述获取与所述模型测试请求对应的数据样本集和测试模型镜像，包括：

解析获取所述模型测试请求中的测试模型路径和测试模型镜像名称；

基于所述测试模型路径和所述测试模型镜像名称在镜像仓库中获取测试模型镜像；

基于所述模型测试请求中的数据集路径在磁盘中获取数据样本集。

3.根据权利要求2所述的方法，其特征在于，所述获取与所述模型测试请求对应的数据样本集和测试模型镜像之后，所述基于所述数据样本集对所述测试模型镜像进行模型测试，得到样本测试结果集之前，所述方法还包括：

将所述测试模型镜像部署于后端服务；

将所述数据样本集在所述磁盘中的数据集路径发送至所述后端服务。

4.根据权利要求1-3任一项所述的方法，其特征在于，所述获取与所述模型测试请求对应的数据样本集和测试模型镜像之后，所述基于所述数据样本集对所述测试模型镜像进行模型测试，得到样本测试结果集之前，所述方法还包括：

获取所述测试模型镜像的测试模型类型；

若所述测试模型类型为SDK测试类型，将所述数据样本集输入至所述测试模型镜像对应的封装包；

若所述测试模型类型为API测试类型，获取所述测试模型镜像的API接口并启动所述API接口，将所述数据样本集输入至所述API接口。

5.根据权利要求1-3任一项所述的方法，其特征在于，所述基于所述第一数据下载请求在所述第一存储区域中获取所述误拒样本集并发送至所述中继服务器，包括：

后端服务接收所述第一数据下载请求，并解析获取所述第一数据下载请求中的误拒样本集路径；

若确定所述样本集路径属于所述第一存储区域，将所述误拒样本集发送至所述中继服务器。