[发明专利]一种2D虚拟模型的驱动方法及设备在审
申请号: | 201610065715.4 | 申请日: | 2016-01-29 |
公开(公告)号: | CN107025679A | 公开(公告)日: | 2017-08-08 |
发明(设计)人: | 周世威;潘亦 | 申请(专利权)人: | 掌赢信息科技(上海)有限公司 |
主分类号: | G06T13/40 | 分类号: | G06T13/40;G06T13/80 |
代理公司: | 北京万慧达知识产权代理有限公司11111 | 代理人: | 张锦波 |
地址: | 200063 上*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 虚拟 模型 驱动 方法 设备 | ||
1.一种2D虚拟模型的驱动方法,其特征在于,所述方法包括:
对当前人脸图像进行特征点定位,并获得所述特征点的2D坐标;
根据所述特征点的2D坐标获得所述特征点的正面化的3D坐标;
获取2D虚拟模型的3D坐标,根据所述2D虚拟模型的3D坐标与预先建立的人脸模型数据库的表情基数据的回归关系,建立所述2D虚拟模型的3D表情基;
根据所述正面化的3D坐标与所述2D虚拟模型的3D表情基,获取所述当前人脸与所述2D虚拟模型的3D表情基的拟合系数;
根据所述拟合系数,驱动所述2D虚拟模型。
2.根据权利要求1所述的方法,其特征在于,所述对当前人脸图像进行特征点定位,并获得所述特征点的2D坐标包括:
对所述特征点中的眼睛部位特征点提取特征向量,并对所述特征向量进行特征降维;
将经过特征降维的特征向量输入预先训练的判别器以判别所述眼睛是否为闭眼状态;
当为闭眼状态时,将所述眼睛部位上眼睑的特征点坐标移至下眼睑的特征点位置。
3.根据权利要求1所述的方法,其特征在于,所述根据所述特征点的2D坐标获得所述特征点的正面化的3D坐标包括:
根据预先训练的3D线性形状增益模型获取所述特征点的3D坐标;
根据所述特征点的2D坐标对所述3D坐标进行优化以获得所述特征点的正面化的3D坐标。
4.根据权利要求3所述的方法,其特征在于,所述根据所述特征点的2D坐标对所述3D坐标进行优化以获得所述特征点的正面化的3D坐标包括:
根据所述特征点的2D坐标和预设公式正面化所述3D坐标。
5.根据权利要求1所述的方法,其特征在于,所述获取2D虚拟模型的3D坐标包括:
获取所述2D虚拟模型的特征点的2D坐标;
根据所述2D虚拟模型的特征点的2D坐标,计算所述2D虚拟模型的特征点的3D坐标。
6.根据权利要求1或5所述的方法,其特征在于,所述根据所述正面化的3D坐标与所述2D虚拟模型的3D表情基,获取所述当前人脸与所述2D虚拟模型表情基的拟合系数包括:
根据所述正面化的3D坐标与所述2D虚拟模型的3D表情基,通过二次规划获取所述拟合系数。
7.根据权利要求6所述的方法,其特征在于,所述根据所述拟合系数,驱动所述2D虚拟模型包括:
根据所述拟合系数,对所述2D虚拟模型的3D表情基进行加权,获取加权后的2D虚拟模型的特征点的3D坐标;
将所述加权后的2D虚拟模型的特征点的3D坐标转换回2D坐标;
根据所述转换回的所述2D坐标,驱动所述2D虚拟模型。
8.根据权利要求5或7所述的方法,其特征在于,所述方法还包括:
根据所述2D虚拟模型的特征点的2D坐标,对所述2D虚拟模型进行三角剖分;
获取剖分后的每个三角形内的像素点坐标。
9.根据权利要求8所述的方法,其特征在于,所述根据所述转换回的所述2D坐标,驱动所述2D虚拟模型包括:
根据所述转换回的所述2D坐标,计算剖分后的所述每个三角形内的像素点的位移;
根据所述位移,驱动所述2D虚拟模型。
10.一种电子设备,其特征在于,所述设备包括:
特征点定位模块,用于对当前人脸图像进行特征点定位,并获得所述特征点的2D坐标;
正面化模块,用于根据所述特征点的2D坐标获得所述特征点的正面化的3D坐标;
2D虚拟模型的3D坐标获取模块,用于获取2D虚拟模型的3D坐标;
建立表情基模块,用于根据所述2D虚拟模型的3D坐标与预先建立的人脸模型数据库的表情基数据的回归关系,建立所述2D虚拟模型的3D表情基;
拟合系数获取模块,用于根据所述正面化的3D坐标与所述2D虚拟模型的3D表情基,获取所述当前人脸与所述2D虚拟模型的3D表情基的拟合系数;
驱动模块,用于根据所述拟合系数,驱动所述2D虚拟模型。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于掌赢信息科技(上海)有限公司,未经掌赢信息科技(上海)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201610065715.4/1.html,转载请声明来源钻瓜专利网。
- 上一篇:楚天绝缘胶带包装箱(舒氏)
- 下一篇:食品包装袋