[发明专利]基于重建网络的人脸重建方法和装置、设备、介质、产品在审
申请号: | 201810551916.4 | 申请日: | 2018-05-31 |
公开(公告)号: | CN108776983A | 公开(公告)日: | 2018-11-09 |
发明(设计)人: | 张韵璇;吴文岩;李诚;钱晨 | 申请(专利权)人: | 北京市商汤科技开发有限公司 |
主分类号: | G06T11/00 | 分类号: | G06T11/00;G06T11/20;G06T7/13 |
代理公司: | 北京思源智汇知识产权代理有限公司 11657 | 代理人: | 毛丽琴 |
地址: | 100084 北京市海淀区中*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 人脸轮廓 人脸 人脸图像 姿势 重建 方法和装置 目标人脸 表情 轮廓线 目标人脸图像 轮廓线提取 角度姿势 训练数据 转换信息 网络 鲁棒性 变更 转换 分析 图片 | ||
1.一种基于重建网络的人脸重建方法,其特征在于,包括:
分别对人脸图像集和待处理人脸图像进行轮廓线提取,获得人脸轮廓线集和待处理人脸轮廓线,所述人脸图像集包括至少一个人脸图像;
根据所述人脸轮廓线集中至少一个人脸轮廓线对应人脸的姿势和/或表情,调整所述待处理人脸轮廓线,得到至少一个目标人脸轮廓线;
基于所述目标人脸轮廓线获得所述待处理人脸图像对应的人脸变更姿势和/或表情后的目标人脸图像。
2.根据权利要求1所述的方法,其特征在于,所述人脸轮廓线包括脸型轮廓线和五官轮廓线;
所述人脸的姿势基于所述脸型轮廓线的角度和形状确定,包括以下至少一种:人脸朝向、人脸宽度、人脸俯仰角度、人脸长度;所述人脸的表情基于所述五官轮廓线的角度和形状确定,包括以下至少一种:喜、怒、哀、乐、惊讶、害怕。
3.根据权利要求1或2所述的方法,其特征在于,所述分别对人脸图像集和待处理人脸图像进行轮廓线提取,获得人脸轮廓线集和待处理人脸轮廓线,包括:
基于编码器将所述人脸图像集中的至少一个人脸图像映射到隐空间,得到至少一个人脸轮廓线构成的人脸轮廓线集;
基于所述编码器将所述待处理人脸图像映射到隐空间,得到待处理人脸轮廓线。
4.根据权利要求1或2所述的方法,其特征在于,所述分别对人脸图像集和待处理人脸图像进行轮廓线提取,获得人脸轮廓线集和待处理人脸轮廓线,包括:
基于关键点提取网络,分别对所述人脸图像集中的至少一个人脸图像和所述待处理人脸图像进行关键点提取,分别得到所述人脸图像对应的至少一组人脸关键点和所述待处理人脸图像对应的一组待处理人脸关键点;
连接每组所述人脸关键点得到至少一个人脸轮廓线,连接所述待处理人脸关键点得到待处理人脸轮廓线。
5.根据权利要求1-4任一所述的方法,其特征在于,所述根据所述人脸轮廓线集中至少一个人脸轮廓线对应人脸的姿势和/或表情,调整所述待处理人脸轮廓线,得到至少一个目标人脸轮廓线,包括:
基于转换器,分别识别所述至少一个人脸轮廓线和所述待处理人脸轮廓线对应人脸的姿势和/或表情;
将所述待处理人脸轮廓线对应人脸的姿势和/或表情分别转换为所述人脸轮廓线对应人脸的姿势和/或表情,得到至少一个目标人脸轮廓线。
6.一种基于重建网络的人脸重建装置,其特征在于,包括:
轮廓线提取单元,用于分别对人脸图像集和待处理人脸图像进行轮廓线提取,获得人脸轮廓线集和待处理人脸轮廓线,所述人脸图像集包括至少一个人脸图像;
轮廓线调整单元,用于根据所述人脸轮廓线集中至少一个人脸轮廓线对应人脸的姿势和/或表情,调整所述待处理人脸轮廓线,得到至少一个目标人脸轮廓线;
图像获得单元,用于基于所述目标人脸轮廓线获得所述待处理人脸图像对应的人脸变更姿势和/或表情后的目标人脸图像。
7.一种电子设备,其特征在于,包括处理器,所述处理器包括权利要求6所述的基于重建网络的人脸重建装置。
8.一种电子设备,其特征在于,包括:存储器,用于存储可执行指令;
以及处理器,用于与所述存储器通信以执行所述可执行指令从而完成权利要求1至5任意一项所述基于重建网络的人脸重建方法的操作。
9.一种计算机存储介质,用于存储计算机可读取的指令,其特征在于,所述指令被执行时执行权利要求1至5任意一项所述基于重建网络的人脸重建方法的操作。
10.一种计算机程序产品,包括计算机可读代码,其特征在于,当所述计算机可读代码在设备上运行时,所述设备中的处理器执行用于实现权利要求1至5任意一项所述基于重建网络的人脸重建方法的指令。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京市商汤科技开发有限公司,未经北京市商汤科技开发有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810551916.4/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种基于调色板压缩图片的显示方法
- 下一篇:一种新型水墨云雾动画制作方法