[发明专利]一种用于视频融合中的图像处理方法和装置

说明书

本发明公开了一种用于视频融合的图像处理方法和装置。其中，图像处理方法包括：分别从至少两个待融合视频中提取关键帧图像，得到与待融合视频分别对应的至少两组关键帧图像组；针对任意一关键帧图像组，对其中的多个关键帧图像进行平均，得到平均背景图像；针对任意一关键帧图像组，根据与关键帧图像组对应的平均背景图像对关键帧图像进行前景检测，得到前景图像；根据待融合视频的时间轴，分别融合各个待融合视频中的背景图像和前景图像。通过从待融合视频中提取关键帧图像，并将关键帧中的背景图像和前景图像分离开来，根据待融合视频的时间轴，分别融合各个所述待融合视频中的背景图像和前景图像分别融合，实现了待视频内容的深度融合。

技术领域

本发明涉及人工智能领域，特别涉及一种用于视频融合的图像处理方法和装置。

背景技术

视频融合技术是虚拟现实技术的一个分支，也可以说是虚拟现实的一个发展阶段。视频融合技术指将一个或多个由视频采集设备采集的关于某场景或模型的图像序列视频与一个与之相关的虚拟场景加以融合，以生成一个新的关于此场景的虚拟场景或模型。

但是，现有的视频融合技术中所用到的素材，都需要人工或者使用单独的工具从视频帧图像中裁剪得到，工作效率低下。

发明内容

本发明要解决,现有技术中视频融合技术中所用到的素材，都需要人工或者使用单独的工具从视频帧图像中裁剪，工作效率低下的技术问题。

为了解决上述技术问题，本发明的技术方案具体包括：

分别从至少两个待融合视频中提取关键帧图像，得到与待融合视频分别对应的至少两组关键帧图像组；其中，每组关键帧图像组中包括多帧关键帧图像；

针对任意一关键帧图像组，对其中的多个关键帧图像进行平均，得到平均背景图像；

针对任意一关键帧图像组，根据与关键帧图像组对应的所述平均背景图像对关键帧图像进行前景检测，得到前景图像；

根据待融合视频的时间轴，分别融合各个所述待融合视频中的背景图像和前景图像。

优选的，所述针对任意一关键帧图像组，根据与关键帧图像组对应的所述平均背景图像对关键帧图像进行前景检测，得到前景图像，包括：

针对任意关键帧图像组，分别缩小关键帧图像组的平均背景图像和关键帧图像的尺寸；

利用关键帧图像组中的多帧关键帧图像分别与所述平均背景图像作差运算，得到多帧前景图像。

优选的，所述利用关键帧图像组中的多帧关键帧图像分别与所述平均背景图像作差运算，得到多帧前景图像之后，还包括：

对前景图像进行顶帽变换得到二值图像；

依据设定的灰度方差阈值和面积阈值，在二值图像中筛选符合条件的八连通区域；

将筛选到的八连通区域映射到缩小前的前景图像中，得到前景图像中待融合素材的位置。

优选的，所述根据待融合视频的时间轴，分别融合各个所述待融合视频中的背景图像和前景图像，包括：

根据待融合视频的时间轴和所述待融合素材的位置，分别融合各个所述待融合视频中的背景图像和待融合素材。

在上述实施例的基础上，还提供了一种用于视频融合的图像处理装置，具体包括：

提取模块，用于分别从至少两个待融合视频中提取关键帧图像，得到与待融合视频分别对应的至少两组关键帧图像组；其中，每组关键帧图像组中包括多帧关键帧图像；

第一处理模块，用于针对任意一关键帧图像组，对其中的多个关键帧图像进行平均运算，得到平均背景图像；