[发明专利]一种虚拟人脸图像重建方法及相关装置在审
申请号: | 202111487936.8 | 申请日: | 2021-12-07 |
公开(公告)号: | CN113989443A | 公开(公告)日: | 2022-01-28 |
发明(设计)人: | 张晓晔;梁俊韬;陈禹明;郑培文;杨英仪;吴勇;赖嘉骏 | 申请(专利权)人: | 南方电网电力科技股份有限公司 |
主分类号: | G06T17/00 | 分类号: | G06T17/00;G06T15/00;G06V40/16;G06V10/82;G06N3/04;G06N3/08 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 李秋梅 |
地址: | 510000 广东省广州市越秀区西*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 虚拟 图像 重建 方法 相关 装置 | ||
1.一种虚拟人脸图像重建方法,其特征在于,包括:
获取目标二维人脸图像和对应的初始化三维人脸参数;
将所述初始化三维人脸参数输入至预设人脸模拟引擎中进行渲染,得到虚拟人脸图像;
基于预设人脸识别模型根据所述目标二维人脸图像和所述虚拟人脸图像进行身份校验,得到第一损失值;
基于预设人脸语义分割模型根据所述目标二维人脸图像和所述虚拟人脸图像进行人脸特征校验,得到第二损失值;
根据所述第一损失值和所述第二损失值对所述初始化三维人脸参数进行优化,得到更新三维人脸参数,并返回所述将所述初始化三维人脸参数输入至预设人脸模拟引擎中进行渲染的步骤,直至迭代收敛,得到优化虚拟人脸图像。
2.根据权利要求1所述的虚拟人脸图像重建方法,其特征在于,所述将所述初始化三维人脸参数输入至预设人脸模拟引擎中进行渲染,得到虚拟人脸图像,之前还包括:
获取单目人脸图像对应的随机三维参数;
将所述随机三维参数输入初始模拟引擎中进行渲染,得到初始虚拟人脸图像;
将所述初始虚拟人脸图像与预设真实人脸图像进行预设像素级损失计算,得到优化损失值,所述预设真实人脸图像通过通用引擎根据所述随机三维参数渲染得到;
通过所述优化损失值优化所述初始模拟引擎的网络参数,得到预设人脸模拟引擎。
3.根据权利要求1所述的虚拟人脸图像重建方法,其特征在于,所述预设人脸识别模型的身份验证损失函数为:
L1=1-cos(FR(G(α)),FR(I))
其中,cos为计算两个目标之间的余弦距离,FR(·)表示人脸识别网络的卷积计算函数,I为所述目标二维人脸图像,G(α)为所述虚拟人脸图像。
4.根据权利要求3所述的虚拟人脸图像重建方法,其特征在于,所述预设人脸语义分割模型的人脸特征验证损失函数为:
L2=||ω(G(α))FS(G(α))-ω(I)FS(I)||1
其中,ω(·)为所述预设人脸语义分割模型中的权值计算,FS(·)表示所述预设人脸语义分割模型的卷积计算函数。
5.一种虚拟人脸图像重建装置,其特征在于,包括:
目标获取模块,用于获取目标二维人脸图像和对应的初始化三维人脸参数;
图像渲染模块,用于将所述初始化三维人脸参数输入至预设人脸模拟引擎中进行渲染,得到虚拟人脸图像;
第一校验模块,用于基于预设人脸识别模型根据所述目标二维人脸图像和所述虚拟人脸图像进行身份校验,得到第一损失值;
第二校验模块,用于基于预设人脸语义分割模型根据所述目标二维人脸图像和所述虚拟人脸图像进行人脸特征校验,得到第二损失值;
优化迭代模块,用于根据所述第一损失值和所述第二损失值对所述初始化三维人脸参数进行优化,得到更新三维人脸参数,并返回所述将所述初始化三维人脸参数输入至预设人脸模拟引擎中进行渲染的步骤,直至迭代收敛,得到优化虚拟人脸图像。
6.根据权利要求5所述的虚拟人脸图像重建装置,其特征在于,还包括:
参数获取模块,用于获取单目人脸图像对应的随机三维参数;
训练渲染模块,用于将所述随机三维参数输入初始模拟引擎中进行渲染,得到初始虚拟人脸图像;
损失计算模块,用于将所述初始虚拟人脸图像与预设真实人脸图像进行预设像素级损失计算,得到优化损失值,所述预设真实人脸图像通过通用引擎根据所述随机三维参数渲染得到;
引擎优化模块,用于通过所述优化损失值优化所述初始模拟引擎的网络参数,得到预设人脸模拟引擎。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南方电网电力科技股份有限公司,未经南方电网电力科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111487936.8/1.html,转载请声明来源钻瓜专利网。
- 上一篇:车道线的检测方法、装置、设备及存储介质
- 下一篇:一种拜耳法赤泥脱碱方法
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序