[发明专利]人脸3D模型生成方法、装置、设备及可读存储介质有效
申请号: | 202011340768.5 | 申请日: | 2020-11-25 |
公开(公告)号: | CN112330805B | 公开(公告)日: | 2023-08-08 |
发明(设计)人: | 彭昊天 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G06T17/00 | 分类号: | G06T17/00 |
代理公司: | 北京同立钧成知识产权代理有限公司 11205 | 代理人: | 张娜;刘芳 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 人脸 模型 生成 方法 装置 设备 可读 存储 介质 | ||
1.一种人脸3D模型生成方法,包括:
电子设备接收二维图像中目标人脸的骨骼驱动系数集合,所述骨骼驱动系数集合包含预置在所述电子设备本地的蒙皮骨骼模型中每个节点的骨骼驱动系数;
所述电子设备根据所述蒙皮骨骼模型中每个节点的骨骼驱动系数,确定对应节点的全局刚性位姿矩阵,得到所述蒙皮骨骼模型中每个节点的全局刚性位姿矩阵;
所述电子设备根据所述蒙皮骨骼模型中每个节点的全局刚性位姿矩阵,确定所述蒙皮骨骼模型中每个节点的刚性变换矩阵;
所述电子设备根据所述蒙皮骨骼模型中每个节点的刚性变换矩阵,变换所述蒙皮骨骼模型中顶点的位置,以得到所述二维图像中目标人脸的第一3D模型。
2.根据权利要求1所述的方法,其中,所述电子设备利用所述骨骼驱动系数集合中的骨骼驱动系数,对所述蒙皮骨骼模型变形,以得到所述二维图像中目标人脸的第一3D模型之后,还包括:
所述电子设备获取用户的表情信息,所述用户是所述目标人脸对应的用户;
所述电子设备根据所述表情信息,驱动所述第一3D模型,以生成动画。
3.根据权利要求1所述的方法,其中,所述电子设备接收二维图像中目标人脸的骨骼驱动系数集合之前,还包括:
所述电子设备向服务器发送请求指令,所述请求指令携带所述二维图像,所述请求指令用于请求所述服务器针对所述二维图像生成所述骨骼驱动系数集合。
4.一种人脸3D模型生成方法,包括:
服务器根据二维图像中的目标人脸生成第二3D模型;
所述服务器构建第一方程,所述第一方程用于指示蒙皮骨骼模型中第三顶点的位置、所述蒙皮骨骼模型中每个节点对所述第二3D模型中第二顶点的蒙皮权重、所述第二3D模型中第二顶点的位置,以及所述蒙皮骨骼模型中每个节点的刚性变换矩阵之间的关系,所述第三顶点是所述蒙皮骨骼模型中与所述第二顶点对应的顶点,所述第三顶点是所述蒙皮骨骼模型中与第一顶点对应的顶点,所述第一顶点是第一3D模型中的顶点;
所述服务器根据所述第一方程,构建用于确定用于所述蒙皮骨骼模型中每个节点的骨骼驱动系数的最小二乘法方程;
所述服务器根据所述蒙皮骨骼模型中每个节点的骨骼驱动系数的最小二乘法方程,确定对应节点的骨骼驱动系数,以得到所述骨骼驱动系数集合。
5.根据权利要求4所述的方法,其中,所述服务器根据所述第一方程,构建用于确定用于所述蒙皮骨骼模型中每个节点的骨骼驱动系数的最小二乘法方程,包括:
对于所述蒙皮骨骼模型中第一节点,所述服务器确定所述第一节点的相关节点集合和无关节点集合,所述第一节点是所述蒙皮骨骼模型中的任意一个节点,所述相关节点集合中的节点是所述第一节点发生刚性变换时蒙皮区域发生变化的节点,所述无关节点集合中的节点是所述第一节点发生刚性变换时蒙皮区域不发生变化的节点;
所述服务器根据所述相关节点集合、所述无关节点集合、所述第一方程,构建第二方程;
所述服务器根据所述第二方程、所述相关节点集合中每个节点的刚性变换矩阵,构建用于确定所述第一节点的骨骼驱动系数的最小二乘法方程。
6.根据权利要求5所述的方法,其中,所述服务器根据所述第二方程、所述相关节点集合中每个节点的刚性变换矩阵,构建用于确定所述第一节点的骨骼驱动系数的最小二乘法方程,包括:
所述服务器分解所述第一节点的刚性变换矩阵,得到第三方程,所述第三方程用于指示所述第一节点的刚性变换矩阵、前变换矩阵、后变换矩阵以及所述第一节点的骨骼驱动系数的关系,所述前变换矩阵是所述第一节点的父节点的全局刚性位姿矩阵,所述后变换矩阵至少根据所述第一节点的全局刚性位姿矩阵的逆确定出;
根据所述第二方程和所述第三方程构建用于确定所述第一节点的骨骼驱动系数的最小二乘法方程。
7.根据权利要求6所述的方法,其中,所述相关节点集合中的节点包括所述第一节点和所述第一节点的子节点,所述第一节点的子节点至少为一个,所述第一节点的前变换矩阵和所述至少一个子节点中任意一个子节点的前变换矩阵相同,所述相关节点集合中的各节点的后变换矩阵不同。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011340768.5/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种金属片精准上料贴合装置
- 下一篇:穿戴设备和电解质含量的检测方法