[发明专利]一种融合多特征和注意力机制的多模态情感分析方法在审
| 申请号： | 202211628659.2 | 申请日： | 2022-12-20 |
| 公开（公告）号： | CN116028846A | 公开（公告）日： | 2023-04-28 |
| 发明（设计）人： | 吕学强;张乐;滕尚志;韩晶 | 申请（专利权）人： | 北京信息科技大学 |
| 主分类号： | G06F18/24 | 分类号： | G06F18/24;G06F18/25;G10L15/16;G06V10/82;G06V20/40;G06N3/0455;G06N3/0442 |
| 代理公司： | 暂无信息 | 代理人： | 暂无信息 |
| 地址： | 100192 北*** | 国省代码： | 北京;11 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种融合多特征和注意力机制的多模态情感分析模型，该模型具体包括以下步骤：通过多模态特征提取模块获得各模态丰富的低层特征；通过自注意力机制实现对三种模态内部信息的提取，获得对应的高层特征；通过跨模态注意力机制分别实现音频‑文本和视频‑文本的交互，在空间上实现模态间信息的交互，将学习到的模态内部信息和模态间交互信息进行拼接，得到更加丰富的音频和视频融合特征；最后拼接三种模态的最终表示并传入一个软注意力模块，为三种模态分配不同的权重，通过全连接层实现多模态情感分类结果。在公开数据集CH‑SIMS上进行测试，本发明可以有效提升多模态情感分析的准确性。 | ||
| 搜索关键词： | 一种 融合 特征 注意力 机制 多模态 情感 分析 方法 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于北京信息科技大学，未经北京信息科技大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202211628659.2/，转载请声明来源钻瓜专利网。
- 上一篇：一种缓解木糖醇结块的系统及其方法
- 下一篇：一种防砂铸铸钢件粘连的浇铸装置
