[发明专利]面部表情迁移方法、装置、存储介质及计算机设备有效
申请号: | 201910662518.4 | 申请日: | 2019-07-22 |
公开(公告)号: | CN110399825B | 公开(公告)日: | 2020-09-29 |
发明(设计)人: | 尹淳骥;万智稳 | 申请(专利权)人: | 广州华多网络科技有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00 |
代理公司: | 北京市立方律师事务所 11330 | 代理人: | 刘延喜 |
地址: | 511442 广东省广州市番*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 面部 表情 迁移 方法 装置 存储 介质 计算机 设备 | ||
1.一种面部表情迁移方法,其特征在于,包括:
读取包含面部表情的二维图像,确定所述二维图像的二维关键特征点;
利用预设的初始表情参数及优化函数处理所述二维关键特征点,获得三维模型的表情参数;其中,所述三维模型是根据所述二维关键特征点及三维数据库所构建;所述优化函数包括第一优化函数和第二优化函数;
根据数据库中预设的样本表情获取所述表情参数与被驱动模型的驱动参数之间的转换函数;
基于所述转换函数及所述表情参数确定所述被驱动模型的驱动参数,根据所述驱动参数调整被驱动模型的面部表情;
其中,所述获得三维模型的表情参数的步骤,包括:
根据初始中性脸参数、预设的第一优化函数、初始表情参数确定中性脸参数矩阵和表情参数矩阵;
基于所述中性脸参数矩阵、表情参数矩阵以及预设的第二优化函数获得优化相机矩阵;
基于所述优化相机矩阵和预设的第一优化函数确定三维模型对应的表情参数。
2.根据权利要求1所述的面部表情迁移方法,其特征在于,所述根据数据库中预设的样本表情获取所述表情参数与被驱动模型的驱动参数之间的转换函数的步骤之前,还包括:
利用初始中性脸参数、初始表情参数、所述优化函数得到三维模型的顶点位置信息;
基于所述三维模型的顶点位置信息及三维面部数据库构建三维模型。
3.根据权利要求1所述的面部表情迁移方法,其特征在于,所述根据初始中性脸参数、预设的第一优化函数、初始表情参数确定中性脸参数矩阵和表情参数矩阵的步骤,包括:
获取初始中性脸参数、初始表情参数、第一优化函数以及面部图像的二维关键特征点;
调用预设的第一优化函数,利用所述二维关键特征点、初始中性脸参数、初始表情参数确定二维到三维投影的初始相机矩阵;
根据所述初始相机矩阵及第一优化函数确定第一中性脸参数及第一表情参数;
分别获取包含若干所述第一中性脸参数的中性脸参数矩阵和包含若干所述第一表情参数的表情参数矩阵。
4.根据权利要求1所述的面部表情迁移方法,其特征在于,所述基于所述中性脸参数矩阵、表情参数矩阵以及第二优化函数获得优化相机矩阵的步骤,包括:
根据所述中性脸参数矩阵与表情参数矩阵每一行的方差确定三维模型中三维关键特征点的权值;其中,所述方差与所述权值呈反比;
利用所述三维关键特征点的权值求解第二优化函数获得优化相机矩阵。
5.根据权利要求3所述的面部表情迁移方法,其特征在于,所述基于所述优化相机矩阵和预设的第一优化函数确定三维模型对应的表情参数的步骤之前,还包括:
基于所述优化相机矩阵判断第一优化函数的误差是否大于预设阈值;
若第一优化函数的误差大于预设阈值,利用所述第一中性脸参数和第一表情参数更新所述优化相机矩阵,直至所述第一优化函数的误差小于预设阈值。
6.根据权利要求1所述的面部表情迁移方法,其特征在于,所述根据数据库中预设的样本表情获取所述表情参数与被驱动模型的驱动参数之间的转换函数的步骤,包括:
获取若干个样本表情对应的二维图像,获取每个样本表情对应的表情参数,调整被驱动模型至预设目标表情,得到所述样本表情对应的驱动参数;
获取所述被驱动模型的需求信息,根据所述需求信息确定表情参数与驱动参数之间的转换函数。
7.根据权利要求6所述的面部表情迁移方法,其特征在于,当所述需求信息表征所述表情参数集和驱动参数重合时,所述根据所述需求信息确定表情参数与驱动参数之间的转换函数的步骤,包括:
对每个样本表情做预设次数的样条插值,转换函数G描述如下:
G(b)=CSPb’(CSPb-1(b)),
其中,b表征样本表情的表情参数,CSPb-1为CSPb的逆运算,CSPb’表征对驱动参数进行样条插值的插值函数。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州华多网络科技有限公司,未经广州华多网络科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910662518.4/1.html,转载请声明来源钻瓜专利网。