[发明专利]一种基于多维度注意力融合网络的多模态情绪分析方法有效
申请号: | 202010292014.0 | 申请日: | 2020-04-14 |
公开(公告)号: | CN111680541B | 公开(公告)日: | 2022-06-21 |
发明(设计)人: | 冯镔;付彦喆;王耀平;江子文;杭浩然;李瑞达;刘文予 | 申请(专利权)人: | 华中科技大学 |
主分类号: | G06V40/16 | 分类号: | G06V40/16;G06V10/80;G06V10/82;G06K9/62;G06F40/30;G10L25/63;G06N3/04 |
代理公司: | 深圳市六加知识产权代理有限公司 44372 | 代理人: | 向彬 |
地址: | 430074 湖北*** | 国省代码: | 湖北;42 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于多维度注意力融合网络的多模态情绪分析方法,包括:针对包含语音、视频、文本等多个模态的样本数据提取语音预处理特征、视频预处理特征、文本预处理特征;然后对每个模态构建所述的多维度注意力融合网络,利用网络内部的自相关特征提取模块提取一级自相关特征和二级自相关特征,然后将三种模态的自相关信息进行组合,利用网络内部的跨模态融合模块得到三种模态的跨模态融合特征;再利用所述的二级自相关特征和跨模态融合特征合并得到模态多维度特征;最后将所述的模态多维度特征进行拼接,确定情绪分数,进行情绪分析;该方法能够有效的在非对齐多模态数据场景下进行特征融合,充分利用多模态的关联信息,进行情绪分析。 | ||
搜索关键词: | 一种 基于 多维 注意力 融合 网络 多模态 情绪 分析 方法 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华中科技大学,未经华中科技大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202010292014.0/,转载请声明来源钻瓜专利网。
- 上一篇:动脉瘤血管支架及其构造方法
- 下一篇:一种图像水印检测方法、装置和计算设备