[发明专利]自适应刚性先验模型训练方法、人脸跟踪方法及相关装置有效

专利信息
申请号: 202010355935.7 申请日: 2020-04-29
公开(公告)号: CN111507304B 公开(公告)日: 2023-06-27
发明(设计)人: 陈文喻;刘更代 申请(专利权)人: 广州市百果园信息技术有限公司
主分类号: G06V40/16 分类号: G06V40/16;G06V20/40;G06V10/764;G06T5/40;G06T7/246;G06T7/60
代理公司: 北京品源专利代理有限公司 11332 代理人: 孟金喆
地址: 510000 广东省广州市番*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 自适应 刚性 先验 模型 训练 方法 跟踪 相关 装置
【权利要求书】:

1.一种自适应刚性先验模型训练方法,其特征在于,包括:

初始化自适应刚性先验模型的模型参数,所述模型参数为以人脸尺寸为自变量的函数,所述自适应刚性先验模型用于输出人脸在不同人脸尺寸时各个人脸区域的权重;

根据所述自适应刚性先验模型对训练视频数据进行人脸跟踪获得同一人脸的多帧人脸数据;

根据所述多帧人脸数据对所述模型参数进行更新;

判断是否达到停止更新所述模型参数的条件;

若是,停止更新所述自适应刚性先验模型的模型参数得到最终的自适应刚性先验模型;

若否,返回基于所述自适应刚性先验模型对训练视频数据进行人脸跟踪获得同一人脸的多帧人脸数据的步骤;

所述自适应刚性先验模型为:

其中,s为人脸的人脸尺寸,是人脸中第k个人脸区域在人脸尺寸为s时的权重,αk(s),βk(s),γk(s)为模型参数,αk(s),βk(s),γk(s)是关于二维人脸尺寸s的函数,dk为第k个人脸区域的位移。

2.根据权利要求1所述的方法,其特征在于,所述根据所述自适应刚性先验模型对训练视频数据进行人脸跟踪获得同一人脸的多帧人脸数据,包括:

对所述训练视频数据进行人脸跟踪以提取每帧训练视频数据中人脸的人脸关键点和人脸表情参数;

根据所述人脸关键点确定所述人脸的人脸尺寸;

采用所述自适应刚性先验模型、所述人脸表情参数和预设形状融合变形器计算所述人脸的各个人脸区域相对于所述人脸的中性人脸的位移。

3.根据权利要求1或2所述的方法,其特征在于,所述人脸数据包括人脸的人脸尺寸和所述人脸的各个人脸区域的位移,所述根据所述多帧人脸数据对所述模型参数进行更新,包括:

按照所述人脸尺寸将所述人脸划分到多个人脸容器中;

针对每个人脸容器中的人脸,计算所述人脸的人脸尺寸的均值;

对所述人脸容器中所述人脸的各个人脸区域的位移分析,获得人脸尺寸为所述均值时所述自适应刚性先验模型的模型参数的型值点;

对不同均值对应的模型参数的型值点进行插值处理,获得所述模型参数关于人脸尺寸的函数以作为所述自适应刚性先验模型的新的模型参数。

4.根据权利要求3所述的方法,其特征在于,所述按照所述人脸尺寸将人脸图像数据对应的人脸划分到多个人脸容器中,包括:

从所述人脸图像数据中确定出最大人脸尺寸和最小人脸尺寸;

将所述最大人脸尺寸和最小人脸尺寸之间的尺寸范围平均分为多个尺寸范围作为人脸容器的人脸尺寸范围;

确定所述人脸的人脸尺寸所在的目标人脸尺寸范围;

将所述人脸划分到所述目标人脸尺寸范围所属的人脸容器中。

5.根据权利要求3所述的方法,其特征在于,所述对所述人脸容器中所述人脸的各个人脸区域的位移分析,获得人脸尺寸为所述均值时所述自适应刚性先验模型的模型参数的型值点,包括:

针对所述人脸容器中所述人脸的每个人脸区域,从所述人脸的人脸图像数据中确定出所述人脸区域的最大位移;

将所述人脸区域的位移划分到多个位移容器中;

从多个位移容器中确定出包含最多位移的最大位移容器;

从所述最大位移容器包含的多个位移中确定出中间位移作为人脸尺寸为所述均值时的第一模型参数的型值点;

根据所述人脸区域的最大位移、中间位移、预设最大权重、预设最小权重以及所述第一模型参数的型值点计算人脸尺寸为所述均值时的第二模型参数的型值点和第三模型参数的型值点。

6.根据权利要求5所述的方法,其特征在于,所述对不同均值对应的模型参数的型值点进行插值处理,获得所述模型参数关于人脸尺寸的函数以作为所述自适应刚性先验模型的新的模型参数,包括:

分别对人脸尺寸为所述均值时的第一模型参数的型值点、第二模型参数型值点和第三模型参数型值点进行样条插值,获得所述第一模型参数、第二模型参数和所述第三模型参数关于人脸尺寸的函数作为所述自适应刚性先验模型的新的模型参数。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州市百果园信息技术有限公司,未经广州市百果园信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202010355935.7/1.html,转载请声明来源钻瓜专利网。

同类专利
专利分类
×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top