[发明专利]基于自适应跟踪框分割的视频穿越处理方法及装置

摘要

本发明公开了一种基于自适应跟踪框分割的视频穿越处理方法及装置，该方法包括：根据与第t帧图像对应的分割结果，确定第二前景图像，并根据第二前景图像，确定待处理区域；依据时间处理参数，绘制穿越效果贴图；将穿越效果贴图与第二前景图像进行融合处理，得到处理后的第t帧图像。该技术方案实现了高效率高精准性地完成场景分割处理，依据分割结果和时间处理参数，能够自动、精准地对帧图像添加穿越效果，从而得到具有穿越效果的视频，提高了视频处理效率，并且本发明可以直接得到处理后的视频数据，不需要用户进行额外技术处理，极大地节省用户时间，方便大众使用。

主权项

1.一种基于自适应跟踪框分割的视频穿越处理方法，所述方法用于对视频中每隔n帧划分得到的各组帧图像进行处理，针对其中一组帧图像，所述方法包括：

获取所述一组帧图像中包含有特定对象的第t帧图像以及与第t‑1帧图像对应的跟踪框，其中t大于1；与第1帧图像对应的跟踪框是根据与第1帧图像对应的分割结果所确定的；

依据第t帧图像，对与第t‑1帧图像对应的跟踪框进行调整处理，得到与第t帧图像对应的跟踪框；根据与第t帧图像对应的跟踪框，对所述第t帧图像的部分区域进行场景分割处理，得到与第t帧图像对应的分割结果；

根据与第t帧图像对应的分割结果，确定第t帧图像的第二前景图像，并根据所述第二前景图像，确定所述第二前景图像中的待处理区域；

依据所述时间处理参数，绘制与所述待处理区域对应的穿越效果贴图；

将所述穿越效果贴图与所述第二前景图像进行融合处理，得到处理后的第t帧图像；

将所述处理后的第t帧图像覆盖所述第t帧图像得到处理后的视频数据；

显示处理后的视频数据。

2.根据权利要求1所述的方法，其中，所述穿越效果贴图包括以下贴图的一种或多种：服装效果贴图、装饰效果贴图、纹理效果贴图以及面部装扮效果贴图。

3.根据权利要求1或2所述的方法，其中，所述依据所述时间处理参数，绘制与所述待处理区域对应的穿越效果贴图进一步包括：

从所述待处理区域中提取出所述待处理区域的关键信息；

根据所述时间处理参数和所述待处理区域的关键信息，绘制与所述待处理区域对应的穿越效果贴图。

4.根据权利要求1‑3任一项所述的方法，其中，所述关键信息为关键点信息；

所述根据所述时间处理参数和所述待处理区域的关键信息，绘制与所述待处理区域对应的穿越效果贴图进一步包括：

根据所述时间处理参数，查找与所述关键点信息匹配的基础穿越效果贴图；

根据所述关键点信息，计算具有对称关系的至少两个关键点之间的位置信息；

依据所述位置信息，对所述基础穿越效果贴图进行处理，得到穿越效果贴图。

5.根据权利要求1‑4任一项所述的方法，其中，所述依据所述位置信息，对所述基础穿越效果贴图进行处理，得到穿越效果贴图进一步包括：

依据所述位置信息中的距离信息，对所述基础穿越效果贴图进行缩放处理；和/或，依据所述位置信息中的旋转角度信息，对所述基础穿越效果贴图进行旋转处理。

6.根据权利要求1‑5任一项所述的方法，其中，所述将所述穿越效果贴图与所述第二前景图像进行融合处理，得到处理后的第t帧图像进一步包括：

将所述穿越效果贴图、所述第二前景图像与根据与第t帧图像对应的分割结果确定的第二背景图像进行融合处理，得到处理后的第t帧图像。

7.根据权利要求1‑6任一项所述的方法，其中，所述依据第t帧图像，对与第t‑1帧图像对应的跟踪框进行调整处理进一步包括：

对第t帧图像进行识别处理，确定第t帧图像中针对特定对象的第一前景图像；

将与第t‑1帧图像对应的跟踪框应用于第t帧图像；

根据第t帧图像中的第一前景图像，对与第t‑1帧图像对应的跟踪框进行调整处理。

8.一种基于自适应跟踪框分割的视频穿越处理装置，所述装置用于对视频中每隔n帧划分得到的各组帧图像进行处理，所述装置包括：

获取模块，适于获取所述一组帧图像中包含有特定对象的第t帧图像以及与第t‑1帧图像对应的跟踪框，其中t大于1；与第1帧图像对应的跟踪框是根据与第1帧图像对应的分割结果所确定的；

分割模块，适于依据第t帧图像，对与第t‑1帧图像对应的跟踪框进行调整处理，得到与第t帧图像对应的跟踪框；根据与第t帧图像对应的跟踪框，对所述第t帧图像的部分区域进行场景分割处理，得到与第t帧图像对应的分割结果；

确定模块，适于根据与第t帧图像对应的分割结果，确定第t帧图像的第二前景图像，并根据所述第二前景图像，确定所述第二前景图像中的待处理区域；

绘制模块，适于依据所述时间处理参数，绘制与所述待处理区域对应的穿越效果贴图；

融合处理模块，适于将所述穿越效果贴图与所述第二前景图像进行融合处理，得到处理后的第t帧图像；

覆盖模块，适于将所述处理后的第t帧图像覆盖所述第t帧图像得到处理后的视频数据；

显示模块，适于显示处理后的视频数据。

9.一种计算设备，包括：处理器、存储器、通信接口和通信总线，所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信；

所述存储器用于存放至少一可执行指令，所述可执行指令使所述处理器执行如权利要求1‑7中任一项所述的基于自适应跟踪框分割的视频穿越处理方法对应的操作。

10.一种计算机存储介质，所述存储介质中存储有至少一可执行指令，所述可执行指令使处理器执行如权利要求1‑7中任一项所述的基于自适应跟踪框分割的视频穿越处理方法对应的操作。