[发明专利]视觉小目标自动标注方法、装置及电子设备

权利要求书

1.一种视觉小目标自动标注方法，其特征在于，包括：

将包含视觉小目标的视频帧进行分类，得到第一类视频帧和第二类视频帧，使得每个相邻第一类视频帧之间包括一个或多个第二类视频帧；

采用顺序方式，分别对所述第一类视频帧和第二类视频帧执行目标检测和跟踪处理，得到第一检测结果，包括：采用顺序方式，在第一类视频帧上使用目标检测算法，获得待标注目标的位置和尺寸，将待标注目标的位置和尺寸作为跟踪处理的初始状态，采用顺序方式，在与所述第一类视频帧相邻的第二类视频帧上使用跟踪算法，基于相邻帧，预估待检测的视觉小目标在当前帧上的位置和尺寸，在对所述第二类视频帧执行跟踪处理的过程中，当出现下一个相邻的第一类视频帧时，结束针对所述第二类视频帧的跟踪处理，实时获取跟踪处理的结果；当跟踪处理的结果的误差超出预设阈值时，结束跟踪处理步骤；

采用逆序方式，分别对所述第一类视频帧和第二类视频帧执行目标检测和跟踪处理，得到第二检测结果，包括：采用逆序方式，在第一类视频帧上使用目标检测算法，获得待标注目标的位置和尺寸，将待标注目标的位置和尺寸作为跟踪处理的初始状态，采用逆序方式，在与所述第一类视频帧相邻的第二类视频帧上使用跟踪算法，基于相邻帧，预估待检测的视觉小目标在当前帧上的位置和尺寸；

采用极大值抑制的方式，对所述第一检测结果和所述第二检测结果进行融合处理，以得到用于进行小目标自动标注的最终标注结果。

2.根据权利要求1所述的方法，其特征在于，所述将包含视觉小目标的视频帧进行分类，得到第一类视频帧和第二类视频帧，包括：

遍历目标视频中的全部视频帧；

每间隔m帧，标记一帧为第一类视频帧；

将第一类视频帧以外的其他视频帧标记为第二类视频帧，其中，所述第一类视频帧用于目标检测，所述第二类视频帧用于目标跟踪。

3.根据权利要求1所述的方法，其特征在于，所述分别对所述第一类视频帧和第二类视频帧执行目标检测和跟踪处理，得到第一检测结果，包括：

在目标检测的过程中，针对检测得到的结果设置针对视频小目标的第一置信度，表示为Cd，用于表示目标被判定正确的可信程度的高低；

在跟踪处理的过程中，对于跟踪处理得到的结果设置第二置信度，表示为Ct，用于表示跟踪处理结果的可靠度；

对于第一置信度和第二置信度执行归一化处理；

基于归一化处理后的结果，将第k帧的置信度用C_k来表示，若第k帧是第一类视频帧，则C_k=Cd，若第k帧是第二类视频帧，则C_k=C_k-1*Ct。

4.根据权利要求1所述的方法，其特征在于，所述采用极大值抑制的方式，对所述第一检测结果和所述第二检测结果进行融合处理，以得到用于进行小目标自动标注的最终标注结果，包括：

对于每一个视频帧，将顺序序列和逆序序列所对应的所述第一检测结果和所述第二检测结果使用非极大值抑制，得到每个视频帧上的最终标注结果。