[发明专利]基于子空间稀疏特征融合的多模态情感识别方法及系统有效
申请号: | 202011019175.9 | 申请日: | 2020-09-25 |
公开(公告)号: | CN111931795B | 公开(公告)日: | 2020-12-25 |
发明(设计)人: | 李树涛;马付严;孙斌 | 申请(专利权)人: | 湖南大学 |
主分类号: | G06K9/46 | 分类号: | G06K9/46;G06K9/62;G06N3/04 |
代理公司: | 湖南兆弘专利事务所(普通合伙) 43008 | 代理人: | 谭武艺 |
地址: | 410082 湖*** | 国省代码: | 湖南;43 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于子空间稀疏特征融合的多模态情感识别方法及系统,本发明方法包括获取多种模态的特征序列,并进行字级对齐和规范化处理、位置编码,然后输入对应的多分支稀疏注意力模块、分解至低维特征子空间得到低维特征,基于权重将所有低维特征在低维特征子空间进行级联,通过多分支稀疏注意力网络中训练得到融合后的多模态信息,再输入预先训练好的情感分类器,得到被识别对象当前的情感类别,所述情感分类器被预先训练建立了融合后的多模态信息、情感类别之间的映射。本发明通过考虑时序信息之间的关联稀疏性,将多模态信息分解至多个子空间中进行融合,能够捕获模态内和模态间的上下文信息,提升了多模态情感识别的准确率。 | ||
搜索关键词: | 基于 空间 稀疏 特征 融合 多模态 情感 识别 方法 系统 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于湖南大学,未经湖南大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202011019175.9/,转载请声明来源钻瓜专利网。