[发明专利]视频换脸方法及装置、存储介质有效
申请号: | 201911248814.6 | 申请日: | 2019-12-09 |
公开(公告)号: | CN111028144B | 公开(公告)日: | 2023-06-20 |
发明(设计)人: | 赖师悦 | 申请(专利权)人: | 腾讯音乐娱乐科技(深圳)有限公司 |
主分类号: | G06T3/00 | 分类号: | G06T3/00 |
代理公司: | 北京三高永信知识产权代理有限责任公司 11138 | 代理人: | 宁立存 |
地址: | 518000 广东省深圳市*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 方法 装置 存储 介质 | ||
1.一种视频换脸方法,其特征在于,所述方法包括:
获取换脸视频帧和融合视频帧,所述换脸视频帧是采用模板人脸图像替换目标视频帧中的目标人脸图像得到的,所述换脸视频帧包括所述模板人脸图像和所述目标人脸图像的背景图像,所述融合视频帧是将所述换脸视频帧中的所述模板人脸图像与所述背景图像融合得到的;
对所述换脸视频帧进行三角剖分,得到至少一个换脸特征区域;
对所述融合视频帧进行三角剖分,得到至少一个融合特征区域,所述至少一个融合特征区域与所述至少一个换脸特征区域一一对应;
对于所述至少一个换脸特征区域中的每个换脸特征区域,根据所述每个换脸特征区域在所述换脸视频帧中的位置,校正所述每个换脸特征区域对应的所述融合特征区域在所述融合视频帧中的位置,得到换脸融合视频帧;
获取位于所述目标视频帧之前的n个第一视频帧和位于所述目标视频帧之后的m个第二视频帧,所述m和所述n均为大于或等于1的整数;
从所述换脸融合视频帧中确定至少一个换脸融合特征区域;
从每个所述第一视频帧中确定至少一个第一光影融合区域,每个所述第一视频帧中的所述至少一个第一光影融合区域与所述至少一个换脸融合特征区域一一对应;
从每个所述第二视频帧中确定至少一个第二光影融合区域,每个所述第二视频帧中的所述至少一个第二光影融合区域与所述至少一个换脸融合特征区域一一对应;
对于所述至少一个换脸融合特征区域中的每个换脸融合特征区域,根据所述每个换脸融合特征区域的像素值,与所述每个换脸融合特征区域对应的n个第一光影融合区域的像素值,以及,与所述每个换脸融合特征区域对应的m个第二光影融合区域的像素值,确定所述每个换脸融合特征区域的光影像素值;
对于所述至少一个换脸融合特征区域中的每个换脸融合特征区域,根据所述每个换脸融合特征区域的光影像素值,对所述每个换脸融合特征区域进行光影抖动处理,得到光影视频帧。
2.根据权利要求1所述的方法,其特征在于,
所述对所述换脸视频帧进行三角剖分,得到至少一个换脸特征区域,包括:
对所述换脸视频帧进行人脸对齐,确定出所述换脸视频帧中的多个换脸特征点;
根据所述多个换脸特征点对所述换脸视频帧进行三角剖分,得到所述至少一个换脸特征区域;
所述对所述融合视频帧进行三角剖分,得到至少一个融合特征区域,包括:
对所述融合视频帧进行人脸对齐,确定出所述融合视频帧中的多个融合特征点;
根据所述多个融合特征点对所述融合视频帧进行三角剖分,得到所述至少一个融合特征区域。
3.根据权利要求1所述的方法,其特征在于,在从所述换脸融合视频帧中确定所述至少一个换脸融合特征区域之前,所述方法还包括:
对所述换脸融合视频帧进行滤波处理。
4.根据权利要求1所述的方法,其特征在于,
所述从所述换脸融合视频帧中确定所述至少一个换脸融合特征区域,包括:
将所述换脸融合视频帧中的校正位置后的所述至少一个融合特征区域,确定为所述至少一个换脸融合特征区域。
5.根据权利要求1所述的方法,其特征在于,m=n=2。
6.根据权利要求1至5任一所述的方法,其特征在于,
在获取换脸视频帧和融合视频帧之前,所述方法还包括:
获取所述目标视频帧和所述模板人脸图像,所述目标视频帧包括所述目标人脸图像和所述背景图像;
所述获取换脸视频帧和融合视频帧,包括:
采用所述模板人脸图像替换所述目标视频帧中的所述目标人脸图像,得到所述换脸视频帧;
将所述换脸视频帧中的所述模板人脸图像与所述背景图像融合,得到所述融合视频帧。
7.一种视频换脸装置,其特征在于,包括用于执行权利要求1至6任一所述的方法的各个模块。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯音乐娱乐科技(深圳)有限公司,未经腾讯音乐娱乐科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911248814.6/1.html,转载请声明来源钻瓜专利网。