[发明专利]一种多模态情感识别方法及系统有效
申请号: | 202110333007.5 | 申请日: | 2021-03-29 |
公开(公告)号: | CN113076847B | 公开(公告)日: | 2022-06-17 |
发明(设计)人: | 姜晓庆;陈贞翔;杨倩;郑永强 | 申请(专利权)人: | 济南大学;山东思正信息科技有限公司 |
主分类号: | G06V40/16 | 分类号: | G06V40/16;G06V10/80;G06V10/82;G06N3/08;G06N20/10;G10L15/05 |
代理公司: | 济南圣达知识产权代理有限公司 37221 | 代理人: | 闫圣娟 |
地址: | 250022 山东*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本公开提供了一种多模态情感识别方法及系统,所述方案通过情感视频样本中语音分量的一种新型、鲁棒的端点检测算法,利用压缩感知理论下样本重建过程中产生的预测残差条件熵参数,计算正交匹配追踪算法(OMP)算法迭代过程中的残差条件熵差值,依据经验阈值完成端点检测,并基于重建样本完成有声段情感语音的特征学习;同时,通过情感语音的端点检测结果,对面部表情图像进行筛选,只保留具有活跃的情感语音同时间段的面部表情图像,达到增强面部表情数据集的情感可去分性、减少冗余性的目的;情感语音特征与面部表情特征经特征融合,训练有效的多模态情感识别模型,达到有效的多模态情感识别目的。 | ||
搜索关键词: | 一种 多模态 情感 识别 方法 系统 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于济南大学;山东思正信息科技有限公司,未经济南大学;山东思正信息科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202110333007.5/,转载请声明来源钻瓜专利网。
- 上一篇:地铁乘坐提醒方法及装置
- 下一篇:一种长寿命轻质化的磁流体动密封装置