[发明专利]视频的人脸替换方法、装置、设备及存储介质有效
申请号: | 202210352988.2 | 申请日: | 2022-04-06 |
公开(公告)号: | CN114429666B | 公开(公告)日: | 2022-07-01 |
发明(设计)人: | 唐向阳;杨志森 | 申请(专利权)人: | 深圳市大头兄弟科技有限公司 |
主分类号: | G06V40/16 | 分类号: | G06V40/16;G06V20/40;G06T7/11;G06T3/00 |
代理公司: | 深圳市特讯知识产权代理事务所(普通合伙) 44653 | 代理人: | 孟智广 |
地址: | 518000 广东省深圳市宝安区西乡街道劳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 替换 方法 装置 设备 存储 介质 | ||
本发明涉及人脸替换领域,公开了一种视频的人脸替换方法、装置、设备及存储介质。该方法包括:获取待处理的视频数据和目标人脸图像,对视频数据进行拆解处理,得到图像帧集;读取图像帧集中的图像帧,对图像帧进行人脸检测处理,得到图像帧中的人脸图像;根据预置人脸采集算法,对人脸图像进行节点覆盖处理,得到人脸图像的特征覆盖区域;根据预置face‑parsing算法,对人脸图像进行裁剪处理,得到人脸图像的面部覆盖区域;将特征覆盖区域和面部覆盖区域进行交集处理,得到面部替换区域;根据预置替换虚化算法,将目标人脸图像替换掉面部替换区域的人脸图像,得到替换图像帧。
技术领域
本发明涉及人脸替换领域,尤其涉及一种视频的人脸替换方法、装置、设备及存储介质。
背景技术
人脸替换可以定制化满足一些特效和动作的需求,现有的人脸替换方法在处理图像过程中,裁剪人脸再进行黏贴处理,可以满足一般的简单场景。但是在需要移动的视频上这种简易裁剪方法会导致整个视频的替换上的脸部较为突兀不自然,而且这种替换方式太久,在耗时上使得用户体验较为糟糕。
因此,为了应对新的脸部替换需要,需要一种新的技术在视频上不仅能自然的替换人脸而且在耗时较小,解决当前视频人脸替换不自然且耗时过长的技术问题。
发明内容
本发明的主要目的在于解决当前视频人脸替换不自然且耗时过长的技术问题。
本发明第一方面提供了一种视频的人脸替换方法,所包括步骤:
获取待处理的视频数据和目标人脸图像,对所述视频数据进行拆解处理,得到图像帧集;
读取所述图像帧集中的图像帧,对所述图像帧进行人脸检测处理,得到所述图像帧中的人脸图像;
根据预置人脸采集算法,对所述人脸图像进行节点覆盖处理,得到所述人脸图像的特征覆盖区域;
根据预置face-parsing算法,对所述人脸图像进行裁剪处理,得到所述人脸图像的面部覆盖区域;
将所述特征覆盖区域和所述面部覆盖区域进行交集处理,得到面部替换区域;
根据预置替换虚化算法,将所述目标人脸图像替换掉所述面部替换区域的人脸图像,得到替换图像帧。
可选的,在本发明第一方面的第一种实现方式中,所述读取所述图像帧集中的图像帧,对所述图像帧进行人脸检测处理,得到所述图像帧中的人脸图像包括:
根据预置DBface人脸检测算法,对所述图像帧进行范围标记处理,得到所述图像帧的人脸检测框。
可选的,在本发明第一方面的第二种实现方式中,所述将根据预置人脸采集算法,对所述人脸图像进行节点覆盖处理,得到所述人脸图像的特征覆盖区域包括:
基于预置dlib数据库,对所述人脸检测框中的图像进行关键点测量处理,得到N个关键点坐标,其中,N为正整数;
基于所述N个关键点坐标,对所述人脸检测框的区域进行迭代逼近处理,得到所述人脸图像的特征覆盖区域。
可选的,在本发明第一方面的第三种实现方式中,所述基于所述N个关键点坐标,对所述人脸检测框的区域进行迭代逼近处理,得到所述人脸图像的特征覆盖区域包括:
提取所述N个关键点坐标中的M个关键点坐标,留下N-M个关键点坐标,其中,M为不大于N的正整数;
对所述M个关键点坐标进行连接面积扩大处理,对所述N-M个关键点坐标进行面积缩小处理,得到所述人脸图像的特征覆盖区域。
可选的,在本发明第一方面的第四种实现方式中,所述对所述M个关键点坐标进行连接面积扩大处理,对所述N-M个关键点坐标进行面积缩小处理,得到所述人脸图像的特征覆盖区域包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市大头兄弟科技有限公司,未经深圳市大头兄弟科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210352988.2/2.html,转载请声明来源钻瓜专利网。