[发明专利]目标检测模型的评估方法、装置、电子设备及存储介质

权利要求书

1.一种目标检测模型的评估方法，其特征在于，所述方法包括：

获取目标场景用例的至少一个目标场景参数，所述目标场景参数是指所述目标场景用例中参数值可调节的场景参数；

获取所述目标场景参数的参数值；

根据所述目标场景参数的参数值运行所述目标场景用例，并获取所述目标场景用例运行时的至少一张场景图片以及所述场景图片的基准标注，所述标注用于标识所述场景图片中的对象；

通过在所述目标场景用例中运行的目标检测模型对所述场景图片中的对象进行预测，得到所述场景图片的预测标注；

根据至少一张所述场景图片对应的基准标注和预测标注，计算所述目标检测模型的评估结果，所述评估结果用于指示所述目标检测模型的预测准确性能。

2.根据权利要求1所述的方法，其特征在于，所述根据至少一张所述场景图片对应的基准标注和预测标注，计算所述目标检测模型的评估结果之后，还包括：

响应于所述评估结果满足预设条件，结束所述目标检测模型的评估，所述预设条件为边界检测结束条件；

响应于所述评估结果未满足所述预设条件，调整至少一个所述目标场景参数的参数值，并从根据所述目标场景参数的参数值运行所述目标场景用例的步骤开始再次执行，直至所述评估结果满足所述预设条件。

3.根据权利要求2所述的方法，其特征在于，所述调整至少一个所述目标场景参数的参数值，包括：

确定所述目标场景参数中需要进行参数调整的第一场景参数；

获取所述第一场景参数的第一参数值，所述第一参数值为第N次计算所述目标检测模型的评估结果时所述第一场景参数的参数值，所述N为大于或等于2的整数；

响应于第二评估结果指示的模型性能低于第一评估结果指示的模型性能，确定接受所述第一参数值；其中，所述第二评估结果为第N次计算得到的所述目标检测模型的评估结果，所述第一评估结果为第N-1次计算得到的所述目标检测模型的评估结果；

响应于所述第二评估结果指示的模型性能高于所述第一评估结果指示的模型性能，计算所述第一参数值被接受的概率，根据所述概率确定是否接受所述第一参数值；

响应于接受所述第一参数值，根据所述第一参数值对所述第一场景参数的参数值进行调整；

响应于不接受所述第一参数值，获取之前接受的所述第一场景参数的第二参数值，根据所述第二参数值对所述第一场景参数的参数值进行调整。

4.根据权利要求3所述的方法，其特征在于，所述计算所述第一参数值被接受的概率，包括：利用预设的概率计算公式，根据所述第一评估结果、所述第二评估结果和获取的当前退火温度计算所述第一参数值被接受的概率；所述概率计算公式如下所示：

其中，所述P表示所述第一参数值被接受的概率，所述e表示自然指数，所述f_k+1表示所述第二评估结果，所述f_k表示所述第一评估结果，所述T表示所述退火温度；所述退火温度根据如下所示的退火温度计算公式计算得到：

T(k)＝rateT(k+1)

其中，所述T(k)表示第k次迭代的退火温度，所述T(k+1)表示第k+1次迭代的退火温度，所述rate表示退火速率，所述rate∈(0,1)。

5.根据权利要求1所述的方法，其特征在于，所述根据至少一张所述场景图片对应的基准标注和预测标注，计算所述目标检测模型的评估结果，包括：

针对每张所述场景图片，根据所述场景图片对应的基准标注和预测标注，确定所述场景图片对应的评估指标值；其中，所述评估指标值是指所述场景图片在相应的评估指标下的评估值，所述评估指标包括以下至少一项：全类平均精度mAP、准确率、错误率；

根据至少一张所述场景图片对应的评估指标值计算所述目标检测模型的评估结果。