[发明专利]基于自适应跟踪框分割的视频人物装扮方法及装置

摘要

本发明公开了一种基于自适应跟踪框分割的视频人物装扮方法及装置，该方法包括：基于与第t‑1帧图像对应的跟踪框得到与第t帧图像对应的跟踪框，并利用该跟踪框对第t帧图像进行场景分割；根据分割结果，确定第t帧图像的第二前景图像，并确定至少一个待装扮区域；对至少一个待装扮区域添加美化效果，得到处理后的第t帧图像。该方案根据视频的帧图像的分割结果能够快速、精准地确定待装扮区域，并对待装扮区域添加美化效果，与现有技术通过模糊处理方式对视频进行处理相比，不仅能够精准地对视频中的人物添加美化效果，而且处理后的视频画面清晰，提高了视频数据显示效果。

主权项

1.一种基于自适应跟踪框分割的视频人物装扮方法，所述方法用于对视频中每隔n帧划分得到的各组帧图像进行处理，针对其中一组帧图像，所述方法包括：

获取所述一组帧图像中包含有特定对象的第t帧图像以及与第t‑1帧图像对应的跟踪框，其中t大于1；与第1帧图像对应的跟踪框是根据与第1帧图像对应的分割结果所确定的；

依据第t帧图像，对与第t‑1帧图像对应的跟踪框进行调整处理，得到与第t帧图像对应的跟踪框；根据与第t帧图像对应的跟踪框，对所述第t帧图像的部分区域进行场景分割处理，得到与第t帧图像对应的分割结果；

根据与第t帧图像对应的分割结果，确定第t帧图像的第二前景图像，并根据所述第二前景图像，确定所述第二前景图像中的至少一个待装扮区域；

对所述至少一个待装扮区域添加美化效果，得到处理后的第t帧图像；

将所述处理后的第t帧图像覆盖所述第t帧图像得到处理后的视频数据；

显示处理后的视频数据。

2.根据权利要求1所述的方法，其中，若待装扮区域为多个，所述对所述至少一个待装扮区域添加美化效果，得到处理后的第t帧图像进一步包括：

针对每个待装扮区域，从所述待装扮区域中提取出所述待装扮区域的关键信息；

依据多个待装扮区域的关键信息，计算多个待装扮区域的相对距离比例关系；

根据所述相对距离比例关系，对多个待装扮区域对应的像素点进行调整，得到处理后的第t帧图像。

3.根据权利要求1或2所述的方法，其中，所述对所述至少一个待装扮区域添加美化效果，得到处理后的第t帧图像进一步包括：

从所述至少一个待装扮区域中提取出所述至少一个待装扮区域的关键信息；

根据所述至少一个待装扮区域的关键信息，绘制美妆效果贴图；

将所述美妆效果贴图与所述第二前景图像进行融合处理，得到处理后的第t帧图像。

4.根据权利要求1‑3任一项所述的方法，其中，所述关键信息为关键点信息；

所述根据所述至少一个待装扮区域的关键信息，绘制美妆效果贴图进一步包括：

查找与所述关键点信息匹配的基础美妆效果贴图；或者，获取用户指定的基础美妆效果贴图；

根据所述关键点信息，计算具有对称关系的至少两个关键点之间的位置信息；

依据所述位置信息，对所述基础美妆效果贴图进行处理，得到美妆效果贴图。

5.根据权利要求1‑4任一项所述的方法，其中，所述依据所述位置信息，对所述基础美妆效果贴图进行处理，得到美妆效果贴图进一步包括：

依据所述位置信息中的距离信息，对所述基础美妆效果贴图进行缩放处理；和/或，依据所述位置信息中的旋转角度信息，对所述基础美妆效果贴图进行旋转处理。

6.根据权利要求1‑5任一项所述的方法，其中，所述将所述美妆效果贴图与所述第二前景图像进行融合处理，得到处理后的第t帧图像进一步包括：

将所述美妆效果贴图、所述第二前景图像与预设背景图像进行融合处理，得到处理后的第t帧图像；或者，将所述美妆效果贴图、所述第二前景图像与根据与第t帧图像对应的分割结果确定的第二背景图像进行融合处理，得到处理后的第t帧图像。

7.根据权利要求1‑6任一项所述的方法，其中，所述依据第t帧图像，对与第t‑1帧图像对应的跟踪框进行调整处理进一步包括：

对第t帧图像进行识别处理，确定第t帧图像中针对特定对象的第一前景图像；

将与第t‑1帧图像对应的跟踪框应用于第t帧图像；

根据第t帧图像中的第一前景图像，对与第t‑1帧图像对应的跟踪框进行调整处理。

8.一种基于自适应跟踪框分割的视频人物装扮装置，所述装置用于对视频中每隔n帧划分得到的各组帧图像进行处理，所述装置包括：

获取模块，适于获取所述一组帧图像中包含有特定对象的第t帧图像以及与第t‑1帧图像对应的跟踪框，其中t大于1；与第1帧图像对应的跟踪框是根据与第1帧图像对应的分割结果所确定的；

分割模块，适于依据第t帧图像，对与第t‑1帧图像对应的跟踪框进行调整处理，得到与第t帧图像对应的跟踪框；根据与第t帧图像对应的跟踪框，对所述第t帧图像的部分区域进行场景分割处理，得到与第t帧图像对应的分割结果；

确定模块，适于根据与第t帧图像对应的分割结果，确定第t帧图像的第二前景图像，并根据所述第二前景图像，确定所述第二前景图像中的至少一个待装扮区域；

处理模块，适于对所述至少一个待装扮区域添加美化效果，得到处理后的第t帧图像；

覆盖模块，适于将所述处理后的第t帧图像覆盖所述第t帧图像得到处理后的视频数据；

显示模块，适于显示处理后的视频数据。

9.一种计算设备，包括：处理器、存储器、通信接口和通信总线，所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信；

所述存储器用于存放至少一可执行指令，所述可执行指令使所述处理器执行如权利要求1‑7中任一项所述的基于自适应跟踪框分割的视频人物装扮方法对应的操作。

10.一种计算机存储介质，所述存储介质中存储有至少一可执行指令，所述可执行指令使处理器执行如权利要求1‑7中任一项所述的基于自适应跟踪框分割的视频人物装扮方法对应的操作。