[发明专利]一种模型头像创建方法、装置、电子设备和存储介质有效
申请号: | 202011606349.1 | 申请日: | 2020-12-30 |
公开(公告)号: | CN112669447B | 公开(公告)日: | 2023-06-30 |
发明(设计)人: | 林江科;袁燚;胡志鹏 | 申请(专利权)人: | 网易(杭州)网络有限公司 |
主分类号: | G06T17/00 | 分类号: | G06T17/00;G06T15/00 |
代理公司: | 北京超凡宏宇专利代理事务所(特殊普通合伙) 11463 | 代理人: | 毕翔宇 |
地址: | 310052 浙江省杭州*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 模型 头像 创建 方法 装置 电子设备 存储 介质 | ||
本申请提供了一种模型头像创建方法、装置、电子设备和存储介质,其中,该方法包括:根据目标源图像,得到所述目标源图像的第一人脸Mesh,根据第一人脸Mesh的第二关键点在三维坐标系上的坐标对目标头部三维网格模型的第三人脸Mesh中对应的第三关键点进行移动,并根据第三关键点的移动值,对目标头部三维网格模型中的第一非关键点进行迁移,根据第三人脸Mesh,对目标源图像中的皮肤部分进行二维贴图展开,得到二维纹理贴图;将二维纹理贴图加载到所述待贴图的头部三维网格模型上,得到覆盖有人脸贴图的头部三维网格模型,通过上述方法可以将源图像的人脸移植到头部三维模型上。
技术领域
本申请涉及计算机技术领域,具体而言,涉及一种模型头像创建方法、装置、电子设备和存储介质。
背景技术
随着图像技术的发展,目前出现了图像换脸技术,即:可以将一张图像(源图像)上的人脸移植到另一张图像(目标图像)上,从而使得到的新图像具有源图像的人脸和目标图像中除了人脸部分之外的其他身体特征,现有的图像换脸技术是通过3DMM(3D MorphableModel,三维人脸可变形模型)技术生成的,即:通过3DMM技术得到源图像的人脸Mesh(人脸区域的三角网格,是一种三维结构),然后将该人脸Mesh变换为二维人脸图像后投影到目标图像的脸部区域。
但是对于头部三维模型的换脸,由于头部三维模型的人脸Mesh的拓扑结构与通过3DMM技术得到的人脸Mesh的拓扑结构是不同的,因此上述换脸技术并不能应用到头部三维模型的换脸中,头部三维模型的换脸技术是目前亟需解决的问题。
发明内容
有鉴于此,本申请实施例提供了一种模型头像创建方法、装置、电子设备和存储介质,以将源图像的人脸移植到头部三维模型上。
第一方面,本申请实施例提供了一种模型头像创建方法,包括:
根据目标源图像,得到所述目标源图像的三维人脸可变形模型3DMM的第一人脸Mesh,其中,所述目标源图像为包括人脸部分的二维图像;
根据为标准3DMM的第二人脸Mesh设定的第一关键点,确定所述第一人脸Mesh中对应位置上的第二关键点;
对于每个所述第二关键点,将第三人脸Mesh中与该第二关键点对应的第三关键点移动至该第二关键点在三维坐标系的坐标上,其中,所述第三人脸Mesh为目标头部三维网格模型的3DMM的人脸Mesh,所述第三人脸Mesh的拓扑结构包括多个顶点,所述多个顶点由所述第三关键点和第一非关键点构成;
根据各所述第三关键点的移动值,对所述目标头部三维网格模型中的所述第一非关键点进行迁移,得到待贴图的头部三维网格模型;
根据所述第三人脸Mesh,对所述目标源图像中的皮肤部分进行二维贴图展开,得到二维纹理贴图;
将所述二维纹理贴图加载到所述待贴图的头部三维网格模型上,得到覆盖有人脸贴图的头部三维网格模型。
可选地,所述根据目标源图像,得到所述目标源图像的3DMM的第一人脸Mesh,包括:
将所述目标源图像输入到形状重建器中,得到所述目标源图像的3DMM系数,其中,所述3DMM系数包括:所述目标源图像的人脸身份系数和所述目标源图像的人脸表情系数;
将所述3DMM系数输入到3DMM公式中,得到所述第一人脸Mesh。
可选地,所述将所述二维纹理贴图加载到所述待贴图的头部三维网格模型上,得到覆盖有人脸贴图的头部三维网格模型,包括:
通过泊松融合方法,将所述二维纹理贴图融合到头部模板纹理贴图上,得到纹理融合贴图,其中,所述头部模板纹理贴图为包括耳朵和额头以上部位的头部贴图;
将所述纹理融合贴图加载到所述待贴图的头部三维网格模型上,得到覆盖有人脸贴图的头部三维网格模型。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于网易(杭州)网络有限公司,未经网易(杭州)网络有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011606349.1/2.html,转载请声明来源钻瓜专利网。