[发明专利]用于情绪状态监测的面部运动单元双流特征提取方法有效
| 申请号： | 201910823132.7 | 申请日： | 2019-09-02 |
| 公开（公告）号： | CN110751016B | 公开（公告）日： | 2023-04-11 |
| 发明（设计）人： | 丁帅;李莹辉;杨善林;曲丽娜;孙晓;王林杰;岳子杰;陶靖 | 申请（专利权）人： | 合肥工业大学;中国航天员科研训练中心 |
| 主分类号： | G06V40/16 | 分类号： | G06V40/16;G06V10/44;G06V10/764;G06V10/82;G06N3/0442;G06N3/0464;G06N3/08 |
| 代理公司： | 北京久诚知识产权代理事务所(特殊普通合伙) 11542 | 代理人： | 余罡 |
| 地址： | 230009 安*** | 国省代码： | 安徽;34 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本申请提供一种用于情绪状态监测的面部运动单元双流特征提取方法，其中，利用第一卷积神经网络和循环神经网络，确定每种预设面部子区域图像对应的第一图像时空特征信息，利用第二卷积神经网络对每种预设面部子区域对应的光流图进行降维和时空特征提取，确定每种预设面部子区域对应的第二时空特征信息，基于每种预设面部子区域对应的第一图像时空特征信息和所有第二图像时空特征信息，确定监测个体的情绪状态分布。本申请同步提取面部视频帧序列的光流和特征图流，充分考虑到图像中面部区域的空间特征及在相邻帧间运动的时间特征，解决了传统算法提取的语义特征重复的缺陷，简化了计算步骤从而降低计算时间复杂度，提高了计算的效率和准确度。 | ||
| 搜索关键词： | 用于 情绪 状态 监测 面部 运动 单元 双流 特征 提取 方法 | ||
【主权项】：
1.一种用于情绪状态监测的面部运动单元双流特征提取方法，其特征在于，包括：/n获取包含目标个体面部的待处理视频；/n基于人脸检测器从待处理视频中提取目标个体的面部区域视频；/n针对面部区域视频中的每张面部区域图像，对该面部区域图像进行分割，分别得到每种预设面部子区域对应的图像；/n针对每种预设面部子区域，利用第一卷积神经网络提取该预设面部子区域对应的每张图像中的图像空间特征信息，并按照该预设面部子区域对应的每张图像的时间先后顺序，依次将该预设面部子区域对应的每张图像的图像空间特征信息输入循环神经网络，利用所述循环神经网络提取输入的图像空间特征信息中时间特征信息，得到该预设面部子区域对应的第一图像时空特征信息；/n针对每种预设面部子区域，按照该预设面部子区域对应的每张图像的时间先后顺序，依次将相邻图像形成的光流图输入第二卷积神经网络，利用第二卷积神经网络提取每相邻两张图像对应的第二时空特征信息；/n针对每种预设面部子区域，利用全连接网络对该预设面部子区域对应的第一图像时空特征信息和所有的第二图像时空特征信息进行降维、加权和全连接处理，得到该预设面部子区域对应的目标特征信息；/n针对每种预设面部子区域，确定与该预设面部子区域对应的目标特征信息匹配的标准情绪信息；其中，每种预设面部子区域均分别预先设置有至少一种标准情绪信息；/n基于每种预设面部子区域对应的标准情绪信息，确定所述目标个体对应的情绪状态信息。/n
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于合肥工业大学;中国航天员科研训练中心，未经合肥工业大学;中国航天员科研训练中心许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201910823132.7/，转载请声明来源钻瓜专利网。
