[发明专利]一种基于视频抽帧的图像拼接与去重方法及装置

权利要求书

1.一种基于视频抽帧的图像拼接与去重方法，其特征在于，包括：

获取目标区域的视频数据，并对所述视频数据进行抽帧，获得一组所述视频数据的关键帧图像集合；

将所述关键帧图像集合输入到预设的拼接库，获得所述关键帧图像集合对应的全景图像和所述关键帧图像集合中每张关键帧图像的单应性变换矩阵；

将所述关键帧图像集合输入到预设的目标检测模型，获得所述关键帧图像集合中每张关键帧图像的目标检测结果；

将所述关键帧图像集合中每张关键帧图像的目标检测结果进行坐标变换和去重，获得所述全景图像的目标检测去重结果，并将所述全景图像和所述全景图像的目标检测去重结果输出。

2.根据权利要求1所述的基于视频抽帧的图像拼接与去重方法，其特征在于，所述获取目标区域的视频数据，并对所述视频数据进行抽帧，获得一组所述视频数据的关键帧图像集合，具体为：

获取目标区域拍摄的视频，并将所述视频根据帧率，分解成单帧图像，构成单帧图像集合；

通过预设的自动抽帧方法，对所述单帧图像集合进行抽帧处理，获得一组关键帧图像集合。

3.根据权利要求2所述的基于视频抽帧的图像拼接与去重方法，其特征在于，所述预设的自动抽帧方法，具体为：

将所述单帧图像集合中的第一帧图像标记为关键帧， 并通过预设的关键帧判定方法，判断得出第二帧图像是否为关键帧；

若是，则将所述第一帧加入关键帧集合，并将所述第二帧作为新的关键帧，重复所述预设的关键帧判定方法，依次判断出所述单帧图像集合中所有的关键帧；

若否，则舍弃第二帧图像，并继续将第一帧图像作为关键帧，并通过预设的关键帧判定方法，依次判断出所述单帧图像集合中所有的关键帧。

4.根据权利要求3所述基于视频抽帧的图像拼接与去重方法，其特征在于，所述预设的关键帧判定方法，具体为：

将所述单帧图像中的第一帧图像标记为关键帧图像，并将视频帧中的第一帧图像和第二帧图像作为待处理的图像，并对所述第一帧图像和第二帧图像进行特征提取，得到所述第一帧图像和第二帧图像对应的特征点；

根据所述第一帧图像和第二帧图像对应的特征点，进行特征匹配，并对匹配成功的特征点进行计算，获得所述第一帧图像和第二帧图像之间的单应性变换矩阵；

根据单应性变换矩阵，将所述第一帧图像和第二帧图像变换到同一坐标系中，并计算所述第一帧图像的面积s1、第二帧图像的面积s2以及所述第一帧图像和第二帧图像的重叠面积s3;

分别计算所述面积s3与所述面积s1的面积比率r1、所述面积s3与所述面积s2的面积比率r2;并将所述面积比率r1与所述面积比率r2中的最大值记为面积比率rm;

若面积比率rm大于预设阈值下限小于预设阈值上限，则将第二帧图像标记为关键帧图像；

若面积比率rm大于等于预设阈值上限，则将第一帧图像标记为关键帧图像；

若面积比率rm小于等于预设阈值下限，则提示视频拍摄过快，需重新拍摄。

5.根据权利要求1所述的基于视频抽帧的图像拼接与去重方法，其特征在于，所述将所述关键帧图像集合输入到预设的拼接库，获得所述关键帧图像集合对应的全景图像和所述关键帧图像集合中每张关键帧图像的单应性变换矩阵，具体为：

将所述关键帧图像集合输入到预设的拼接库，所述拼接库对所述关键帧图像集合中每帧图像进行特征提取，并对相邻帧图像之间进行其特征点的匹配计算，利用匹配的点计算得相邻帧图像之间单应性变换矩阵；

根据所述应性变换矩阵，将所述关键帧图像集合中所有的关键帧图像变换到同一基准坐标系中；并将所述关键帧图像之间重叠区域的边缘进行拼接，得到拼接后的图像；

将所述拼接后的图像作为全景图像以及每张关键帧图像的单应性变换矩阵进行输出。

6.根据权利要求1所述的基于视频抽帧的图像拼接与去重方法，其特征在于，所述预设的目标检测模型，具体构建方法为：

采集所要识别的目标数据集，并对数据进行标注；

根据实际需求，设定所要识别的场景目标类别数；

将所述目标数据集进行训练所述检测模型，直到所述目标检测模型符合预设的要求。