[发明专利]三维人脸的重建方法、装置、电子设备以及存储介质在审

专利信息
申请号: 202110151906.3 申请日: 2021-02-03
公开(公告)号: CN112819947A 公开(公告)日: 2021-05-18
发明(设计)人: 俞云杰;黄晗;郭彦东 申请(专利权)人: OPPO广东移动通信有限公司
主分类号: G06T17/00 分类号: G06T17/00;G06T15/00;G06T15/50;G06N3/04;G06N3/08
代理公司: 深圳市智圈知识产权代理事务所(普通合伙) 44351 代理人: 吕静
地址: 523860 广东*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 三维 重建 方法 装置 电子设备 以及 存储 介质
【说明书】:

本申请公开了一种三维人脸的重建方法、装置、电子设备以及存储介质,涉及电子设备技术领域。该方法包括:获取待重建人脸的形状参数和纹理参数,将形状参数输入第一模型,获得第一模型输出的三维人脸形状,将纹理参数输入第二模型,获得第二模型输出的人脸纹理贴图,其中,第一模型和第二模型中的至少一个基于生成对抗网络训练获得,基于三维人脸形状和人脸纹理贴图,生成目标三维人脸,其中,目标三维人脸包括基于人脸纹理贴图生成的纹理信息。本申请通过训练好的生成对抗网络来生成三维人脸形状和/或人脸纹理贴图,使得生成的目标三维人脸具有丰富的细节特征,提升三维人脸的重建效果。

技术领域

本申请涉及电子设备技术领域,更具体地,涉及一种三维人脸的重建方法、装置、电子设备以及存储介质。

背景技术

在计算机视觉和计算机图形学领域,三维人脸重建是一个热度逐渐上升的话题,由于它能广泛地应用于人脸识别、人脸编辑、人机交互、表情驱动的动画、增强现实、虚拟现实等领域。而基于单张RGB图像的三维人脸重建—即利用单张RGB图像重建出三维人脸形状和纹理,更是一个经久不衰的话题。目前,基于单张RGB图像重建的三维人脸的细节较差,缺乏逼真性。

发明内容

鉴于上述问题,本申请提出了一种三维人脸的重建方法、装置、电子设备以及存储介质,以解决上述问题。

第一方面,本申请实施例提供了一种三维人脸的重建方法,所述方法包括:获取待重建人脸的形状参数和纹理参数;将所述形状参数输入第一模型,获得所述第一模型输出的三维人脸形状;将所述纹理参数输入第二模型,获得所述第二模型输出的人脸纹理贴图,其中,所述第一模型和所述第二模型中的至少一个基于生成对抗网络训练获得;基于所述三维人脸形状和所述人脸纹理贴图,生成目标三维人脸,其中,所述目标三维人脸包括基于所述人脸纹理贴图生成的纹理信息。

第二方面,本申请实施例提供了一种三维人脸的重建装置,所述装置包括:参数获取模块,用于获取待重建人脸的形状参数和纹理参数;人脸形状获得模块,用于将所述形状参数输入第一模型,获得所述第一模型输出的三维人脸形状;纹理贴图获得模块,用于将所述纹理参数输入第二模型,获得所述第二模型输出的人脸纹理贴图,其中,所述第一模型和所述第二模型中的至少一个基于生成对抗网络训练获得;三维人脸生成模块,用于基于所述三维人脸形状和所述人脸纹理贴图,生成目标三维人脸,其中,所述目标三维人脸包括基于所述人脸纹理贴图生成的纹理信息。

第三方面,本申请实施例提供了一种电子设备,包括存储器和处理器,所述存储器耦接到所述处理器,所述存储器存储指令,当所述指令由所述处理器执行时所述处理器执行上述方法。

第四方面,本申请实施例提供了一种计算机可读取存储介质,所述计算机可读取存储介质中存储有程序代码,所述程序代码可被处理器调用执行上述方法。

本申请实施例提供的三维人脸的重建方法、装置、电子设备以及存储介质,获取待重建人脸的形状参数和纹理参数,将形状参数输入第一模型,获得第一模型输出的三维人脸形状,将纹理参数输入第二模型,获得第二模型输出的人脸纹理贴图,其中,第一模型和第二模型中的至少一个基于生成对抗网络训练获得,基于三维人脸形状和人脸纹理贴图,生成目标三维人脸,其中,目标三维人脸包括基于人脸纹理贴图生成的纹理信息,从而通过训练好的生成对抗网络来生成三维人脸形状和/或人脸纹理贴图,使得生成的目标三维人脸具有丰富的细节特征,提升三维人脸的重建效果。

附图说明

为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其它的附图。

图1示出了本申请一个实施例提供的三维人脸的重建方法的流程示意图;

图2示出了本申请又一个实施例提供的三维人脸的重建方法的流程示意图;

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于OPPO广东移动通信有限公司,未经OPPO广东移动通信有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202110151906.3/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top