[发明专利]用于捕捉耳朵动画特征的方法、电子设备在审
申请号: | 202010358130.8 | 申请日: | 2020-04-29 |
公开(公告)号: | CN111553286A | 公开(公告)日: | 2020-08-18 |
发明(设计)人: | 生金龙 | 申请(专利权)人: | 北京攸乐科技有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06T13/40 |
代理公司: | 北京卫智畅科专利代理事务所(普通合伙) 11557 | 代理人: | 陈佳 |
地址: | 100029 北京市朝阳*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 用于 捕捉 耳朵 动画 特征 方法 电子设备 | ||
1.一种用于捕捉耳朵动画特征的方法,包括:
获取表演者的面部表情数据,其中,所述面部表情数据包括第一数目个深度图像;
对于所述面部表情数据中的每个深度图像,生成该深度图像对应于预先确定的耳朵动画模型的过程参数;
基于所述面部表情数据中的每个深度图像的过程参数,生成耳朵动画特征。
2.根据权利要求1所述的方法,其中,所述获取表演者的面部表情数据,包括:
启动深度摄像机;
接收所述深度摄像机返回的视频数据,其中,所述视频数据包括第一数目帧图像;
将所述视频数据转化为深度图像序列,其中,所述深度图像序列包括第一数目个深度图像;
将所述深度图像序列保存为所述面部表情数据。
3.根据权利要求1所述的方法,其中,所述方法还包括:
基于所述耳朵动画模型和所述面部表情数据中的第一个深度图像,生成面部关键区域内的面部关键点的初始位置信息,其中,所述面部关键区域包括左眼区域、右眼区域、嘴巴区域,以及,所述面部关键点的初始位置信息包括左眼左角的初始位置信息、右眼右角的初始位置信息、左眼睑中点的初始位置信息、右眼睑中点的初始位置信息、左嘴角的初始位置信息、右嘴角的初始位置信息;以及
利用所述耳朵动画模型得到所述第一个深度图像的初始模型关键点集合,生成第一个深度图像的脸部及五官轮廓;
对所述脸部及五官轮廓进行对齐归一化处理;
对于所述初始模型关键点集合中的每个初始模型关键点,沿所述脸部及五官轮廓的法线方向搜索以及完成灰度匹配,得到所述第一个深度图像的模型关键点集合;
将所述第一个深度图像的模型关键点集合中每个关键点的坐标确定为所述面部关键区域内的面部关键点的初始位置信息。
4.根据权利要求3所述的方法,其中,所述生成该深度图像对应于预先确定的耳朵动画模型的过程参数,包括:
基于该深度图像与所述耳朵动画模型,生成所述表演者的面部关键点的位置信息;
将所述表演者的面部关键点的位置信息保存为所述过程参数。
5.根据权利要求4所述的方法,其中,所述基于所述面部表情数据中的每个深度图像的过程参数,生成耳朵动画特征,包括:
基于该深度图像的过程参数,生成该深度图像对应的所述面部关键点的过程偏移量;
保存该深度图像的过程偏移量,得到所述耳朵动画特征。
6.根据权利要求5所述的方法,其中,所述基于该深度图像的过程参数,生成该深度图像对应的所述面部关键点的过程偏移量,包括:
将所述过程参数中的左眼左角位置信息与左眼左角的初始位置信息相匹配,生成左眼左角的过程偏移量;
将所述过程参数中的右眼右角位置信息与右眼右角的初始位置信息相匹配,生成左眼左角的过程偏移量;
将所述过程参数中的左眼睑中点位置信息与左眼睑中点的初始位置信息相匹配,生成左眼睑中点的过程偏移量;
将所述过程参数中的右眼睑中点位置信息与右眼睑中点的初始位置信息相匹配,生成右眼睑中点的过程偏移量;
将所述过程参数中的左嘴角位置信息与左嘴角的初始位置信息相匹配,生成左嘴角的过程偏移量;
将所述过程参数中的右嘴角中点位置信息与右嘴角的初始位置信息相匹配,生成右嘴角的过程偏移量。
7.根据权利要求5所述的方法,其中,所述保存该深度图像的过程偏移量,得到所述耳朵动画特征,包括:
保存该深度图像的过程偏移量,得到所述面部表情数据中的面部关键点的偏移数据;
根据所述面部表情数据中的面部关键点的偏移数据,确定耳朵的运动情况;
基于所述耳朵的运动情况,生成所述耳朵动画特征。
8.一种第一终端设备,包括:
一个或多个处理器;
存储装置,其上存储有一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-7中任一所述的方法。
9.一种计算机可读存储介质,其上存储有计算机程序,其中,所述程序被处理器执行时实现如权利要求1-7中任一所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京攸乐科技有限公司,未经北京攸乐科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010358130.8/1.html,转载请声明来源钻瓜专利网。