[发明专利]三维人脸重建方法、装置、设备以及存储介质在审
申请号: | 202110670116.6 | 申请日: | 2021-06-17 |
公开(公告)号: | CN113327278A | 公开(公告)日: | 2021-08-31 |
发明(设计)人: | 梁柏荣 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G06T7/50 | 分类号: | G06T7/50;G06T7/11;G06T7/194;G06T15/00;G06T17/10 |
代理公司: | 北京英赛嘉华知识产权代理有限责任公司 11204 | 代理人: | 王达佐;马晓亚 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 三维 重建 方法 装置 设备 以及 存储 介质 | ||
本公开提供了三维人脸重建方法、装置、设备以及存储介质,涉及人工智能技术领域,具体涉及计算机视觉和深度学习技术领域,可应用于人脸识别和人脸重建场景下。具体实现方案为:获取目标二维人脸图像;对目标二维人脸图像进行人脸分割,得到第一人脸掩膜图像;利用预设的参数化人脸模型,对第一人脸掩膜图像进行空间转换,得到第二人脸掩膜图像;根据第二人脸掩膜图像以及目标二维人脸图像,确定第一纹理图像;基于第一纹理图像,确定目标二维人脸图像对应的三维人脸模型。本实现方式可以基于二维人脸图像进行三维人脸重建,得到三维人脸模型。
技术领域
本公开涉及人工智能技术领域,具体涉及计算机视觉和深度学习技术领域,尤其涉及三维人脸重建方法、装置、设备以及存储介质,可应用于人脸识别和人脸重建场景下。
背景技术
随着视频技术的发展,有人脸画面显示需求的人脸动画、人脸识别和增强现实(Augmented Reality,AR)等娱乐应用中对于逼真的人脸模型的创建需求也越来越大。由于在同一人脸录制的视频中,不同视频帧内通常会存在多种表情,因此在三维人脸重建时需要对各个视频帧中的人脸表情进行跟踪,以使重建后的三维人脸中配置有相应的表情,增强三维人脸重建的逼真性。
三维人脸重建包含了人脸形状重建和人脸纹理重建两个重要部分。通过纹理重建技术,可以实现在三维人脸模型上重现逼真的人脸效果,从而在三维人脸动画、三维人脸识别等应用中充分发挥三维人脸重建的作用。
发明内容
本公开提供了一种三维人脸重建方法、装置、设备以及存储介质。
根据第一方面,提供了一种三维人脸重建方法,包括:获取目标二维人脸图像;对目标二维人脸图像进行人脸分割,得到第一人脸掩膜图像;利用预设的参数化人脸模型,对第一人脸掩膜图像进行空间转换,得到第二人脸掩膜图像;根据第二人脸掩膜图像以及目标二维人脸图像,确定第一纹理图像;基于第一纹理图像,确定目标二维人脸图像对应的三维人脸模型。
根据第二方面,提供了一种三维人脸重建装置,包括:图像获取单元,被配置成获取目标二维人脸图像;人脸分割单元,被配置成对目标二维人脸图像进行人脸分割,得到第一人脸掩膜图像;掩膜转换单元,被配置成利用预设的参数化人脸模型,对第一人脸掩膜图像进行空间转换,得到第二人脸掩膜图像;纹理确定单元,被配置成根据第二人脸掩膜图像以及目标二维人脸图像,确定第一纹理图像;人脸重建单元,被配置成基于第一纹理图像,确定目标二维人脸图像对应的三维人脸模型。
根据第三方面,提供了一种电子设备,包括:至少一个处理器;以及与上述至少一个处理器通信连接的存储器;其中,存储器存储有可被至少一个处理器执行的指令,上述指令被至少一个处理器执行,以使至少一个处理器能够执行如第一方面所描述的方法。
根据第四方面,提供了一种存储有计算机指令的非瞬时计算机可读存储介质,上述计算机指令用于使计算机执行如第一方面所描述的方法。
根据第五方面,一种计算机程序产品,包括计算机程序,上述计算机程序在被处理器执行时实现如第一方面所描述的方法。
根据本公开的技术能够基于二维人脸图像进行三维人脸重建,得到三维人脸模型。
应当理解,本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征,也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
附图用于更好地理解本方案,不构成对本公开的限定。其中:
图1是本公开的一个实施例可以应用于其中的示例性系统架构图;
图2是根据本公开的三维人脸重建方法的一个实施例的流程图;
图3是根据本公开的三维人脸重建方法的一个应用场景的示意图;
图4是根据本公开的三维人脸重建方法的另一个实施例的流程图;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110670116.6/2.html,转载请声明来源钻瓜专利网。