[发明专利]一种多分制目标检测算法评价系统及方法

权利要求书

1.一种多分制目标检测算法评价系统，其特征在于，包括：

算法输入模块，用于输入待测算法；

测试集准备模块，用于根据待测算法选择具有被测目标种类的测试集；

综合评分模块，包括：

总体图像质量数据集生成单元，用于对测试集进行加噪处理，并根据图像质量评价指标获得测试集每张图像的距离指标，根据距离指标将测试集划分为多个质量等级的数据集；

总体图像分辨率数据集生成单元，用于根据图像分辨率大小将测试集划分为多个不同等级的数据集；

总体目标质量数据集生成单元，用于根据目标质量好差将测试集划分为多个不同等级的数据集；

总体目标大小数据集生成单元，用于根据目标大小将测试集划分为多个不同等级的数据集；

总体图像质量评分单元，用于通过总体图像质量数据集生成单元生成的数据集分别对待测算法进行测试，分别计算mAP，利用归一化权重对各等级对应的mAP评分进行加权处理获得总体图像质量评分；

总体图像分辨率评分单元，用于通过总体图像分辨率数据集生成单元生成的数据集分别对待测算法进行测试，分别计算mAP，利用平均权重对各等级对应的mAP评分进行加权处理获得总体图像分辨率评分；

总体目标质量评分单元，用于通过总体目标质量数据集生成单元生成的数据集分别对待测算法进行测试，分别计算mAP，利用归一化权重对各等级对应的mAP评分进行加权处理获得总体目标质量评分；

总体目标大小评分单元，用于通过总体目标数据集生成单元生成的数据集分别对待测算法进行测试，分别计算mAP，利用平均权重对各等级对应的mAP评分进行加权处理获得总体目标大小评分；

总体综合评分单元，用于对总体图像质量评分、总体图像分辨率评分、总体目标质量评分、总体目标大小评分进行平均加权处理获得总体综合评分；

应用场景评分模块，包括：

场景图像质量数据集生成单元，用于对测试集进行加噪处理，并根据图像质量评价指标获得测试集每张图像的距离指标，根据距离指标将测试集划分为多个质量等级的数据集，将其中等级最好的两个数据集中的一个数据集作为场景图像质量数据集；

场景图像分辨率数据集生成单元，用于根据预设的分辨率参数从测试集中生成与该预设的分辨率参数对应的场景图像分辨率数据集；

场景目标质量数据集生成单元，用于根据预设的目标质量参数从测试集中生成与该预设的目标质量参数对应的场景目标质量数据集；

场景目标大小数据集生成单元，用于根据预设的目标大小参数从测试集中生成与该预设的目标大小参数对应的场景目标大小数据集；

场景图像质量评分单元，用于通过场景图像质量数据集生成单元生成的场景图像质量数据集对待测算法进行测试，计算mAP以获得场景图像质量评分；

场景图像分辨率评分单元，用于通过场景图像分辨率数据集生成单元生成的数据集对待测算法进行测试，计算mAP以获得场景图像分辨率评分；

场景目标质量评分单元，用于通过场景目标质量数据集生成单元生成的数据集对待测算法进行测试，计算mAP以获得场景目标质量评分；

场景目标大小评分单元，用于通过场景目标大小数据集生成单元生成的数据集对待测算法进行测试，计算mAP以获得场景目标大小评分；

场景综合评分单元，用于对场景图像质量评分、场景图像分辨率评分、场景目标质量评分、场景目标大小评分进行平均加权处理获得应用场景评分；

自由评分模块，包括：

自由场景预设单元，用于响应于用户输入的图像质量参数、图像分辨率参数、目标质量参数、目标大小参数中至少一种自由场景参数，对应选择出自由图像质量场景、自由图像分辨率场景、自由目标质量场景、自由目标大小场景中与自由场景参数对应的场景作为自由测试场景；

自由场景数据集生成单元，根据自由测试场景及自由场景参数从测试集中生成对应的自由数据集；

自由评分单元，用于通过自由数据集对待测算法进行测试，计算mAP以获得对应自由测试场景的自由评分，并在获得两种以上自由评分时，将各自由评分进行平均加权得到综合自由评分；在只获得一种自由评分时，以该种自由评分作为综合自由评分。