[发明专利]一种微表情类型的确定方法、装置、电子设备及存储介质在审
申请号: | 202111002587.6 | 申请日: | 2021-08-30 |
公开(公告)号: | CN113743275A | 公开(公告)日: | 2021-12-03 |
发明(设计)人: | 陈通;周巨 | 申请(专利权)人: | 西南大学 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/62 |
代理公司: | 北京超凡宏宇专利代理事务所(特殊普通合伙) 11463 | 代理人: | 刘凤 |
地址: | 400700*** | 国省代码: | 重庆;50 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 表情 类型 确定 方法 装置 电子设备 存储 介质 | ||
1.一种微表情类型的确定方法,其特征在于,所述确定方法包括:
获取目标生物的第一帧图像和第二帧图像,所述第一帧图像在时序上先于所述第二帧图像;
基于特征点检测模型,确定所述第一帧图像和所述第二帧图像中分别对应的第一特征点坐标信息和第二特征点坐标信息;
根据所述第一特征点坐标信息和所述第二特征点坐标信息,确定目标特征向量;
根据所述目标特征向量,确定所述目标生物对应的微表情类型。
2.根据权利要求1所述的确定方法,其特征在于,所述根据所述第一特征点坐标信息和所述第二特征点坐标信息,确定目标特征向量,包括:
通过计算所述第二特征点坐标信息与所述第一特征点坐标信息的差值,得到所述目标特征向量。
3.根据权利要求1或2所述的确定方法,其特征在于,所述第一帧图像为所述目标生物的视频数据中的起始帧图像。
4.根据权利要求1或2所述的确定方法,其特征在于,所述第二帧图像为所述目标生物的视频数据中表情变化强度变化最大的顶帧图像。
5.根据权利要求4所述的确定方法,其特征在于,通过以下方式确定顶帧图像包括:
计算所述目标生物的视频数据中每一帧图像的表情变化强度,所述表情变化强度为当前帧图像与前一帧图像的特征点坐标信息差值,并取差值求和后的绝对值;
将所述表情变化强度最大的一帧图像确定为所述顶帧图像。
6.根据权利要求1所述的确定方法,其特征在于,通过以下方式得到特征点检测模型:
获取微表情样本图像及其对应的特征点坐标信息;
根据所述微表情样本图像及其对应的特征点坐标信息,对初始训练模型进行训练,得到所述特征点检测模型。
7.根据权利要求1所述的确定方法,其特征在于,所述根据所述目标特征向量,确定所述目标生物对应的微表情类型,包括:
将所述目标特征向量输入到预置分类器,确定与所述目标生物对应的微表情类型,所述预置分类器是根据样本库中的特征向量样本和其对应的微表情标签训练得到的;或
通过计算所述目标特征向量与预置数据表中的特征向量的相似度,确定所述目标生物对应的微表情类型,所述预置数据表中包含多个特征向量与微表情类型的对应关系。
8.根据权利要求7所述的确定方法,其特征在于,通过以下方式确定预置分类器:
获取所述目标生物的视频样本数据及其对应的微表情标签;
根据所述视频样本数据中的目标帧图像与起始帧图像,计算特征向量样本,所述目标帧图像为所述视频样本数据中除了所述起始帧图像的任意一帧图像;
将所述特征向量样本和所述微表情标签对应存储到所述样本库中,确定预置分类器。
9.根据权利要求8所述的确定方法,其特征在于,通过以下方式确定所述特征向量样本:
确定所述目标帧图像和所述起始帧图像分别对应的特征点坐标信息;
通过计算所述目标帧图像与所述起始帧图像的特征点坐标信息的差值,确定所述特征向量样本。
10.一种微表情类型的确定装置,其特征在于,所述确定装置包括:
获取模块,用于获取目标生物的第一帧图像和第二帧图像,所述第一帧图像在时序上先于所述第二帧图像;
第一确定模块,用于基于特征点检测模型,确定所述第一帧图像和所述第二帧图像中分别对应的第一特征点坐标信息和第二特征点坐标信息;
第二确定模块,用于根据所述第一特征点坐标信息和所述第二特征点坐标信息,确定目标特征向量;
第三确定模块,用于根据所述目标特征向量,确定所述目标生物对应的微表情类型。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于西南大学,未经西南大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111002587.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:面板体组件、机柜空调和机柜
- 下一篇:一种角膜环钻