[发明专利]基于多任务学习与注意力机制的多模态融合情感识别系统、方法及实验评价方法在审
| 申请号： | 202110690885.2 | 申请日： | 2021-06-22 |
| 公开（公告）号： | CN113420807A | 公开（公告）日： | 2021-09-21 |
| 发明（设计）人： | 王庆岩;王吉予;殷楠楠;谢金宝;梁欣涛 | 申请（专利权）人： | 哈尔滨理工大学 |
| 主分类号： | G06K9/62 | 分类号： | G06K9/62;G06N20/20 |
| 代理公司： | 哈尔滨市伟晨专利代理事务所(普通合伙) 23209 | 代理人： | 荣玲 |
| 地址： | 150080 黑龙*** | 国省代码： | 黑龙江;23 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明是一种基于多任务学习与注意力机制的多模态融合情感识别系统、方法及实验评价方法，为解决现有技术中缺乏引入多模态融合机制的多模态情感识别过程效率、准确率低的问题；属于在人机交互领域，相对于单一模态的情感识别工作，多种模态相结合的情感识别应用更加广泛，因此提出一种基于多任务学习与注意力机制相结合的多模态融合情感识别方法。利用多任务学习引入辅助任务使得各模态自身的情感表示可以被更高效地学习到，交互注意力机制可以使得各模态间情感表示相互学习相互补充，进而提升对多模态情感得识别准确率；在多模态数据集CMU‑MOSI和CMU‑MOSEI上进行实验，准确率和F1值均有提升，同时提高了情感信息识别的准确性和效率。 | ||
| 搜索关键词： | 基于 任务 学习 注意力 机制 多模态 融合 情感 识别 系统 方法 实验 评价 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于哈尔滨理工大学，未经哈尔滨理工大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202110690885.2/，转载请声明来源钻瓜专利网。
