[发明专利]基于通道扩展与融合的循环胶囊网络多模态情感识别方法在审
申请号: | 202310567609.6 | 申请日: | 2023-05-19 |
公开(公告)号: | CN116502181A | 公开(公告)日: | 2023-07-28 |
发明(设计)人: | 孙强;党鑫豪 | 申请(专利权)人: | 西安理工大学 |
主分类号: | G06F18/25 | 分类号: | G06F18/25;G06F18/214;G06N3/0464;G06N3/045;G06N3/044;G06F40/30;G06N3/08 |
代理公司: | 西安弘理专利事务所 61214 | 代理人: | 刘娜 |
地址: | 710048 陕*** | 国省代码: | 陕西;61 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了基于通道扩展与融合的循环胶囊网络多模态情感识别方法,具体为:从每个视频样本中分别提取音频模态特征序列、视觉模态特征序列和文本模态特征序列;将特征序列逐一输入时域卷积网络中,得到包含上下文信息的模态特征序列、视觉模态特征序列和文本模态特征序列;利用多通道可变形卷积网络从上述模态特征序列中逐一学习,得到包含高层语义信息的音频模态特征序列、视觉模态特征序列和文本模态特征序列,利用构建的多模态语义胶囊融合网络获取全局信息胶囊,并输入到双向长短期记忆网络中进行压缩,最后,送入密集层中进行多模态情感分类。本发明的基于通道扩展与融合的循环胶囊网络合理有效,能够达大大提高多模态情感识别的准确率。 | ||
搜索关键词: | 基于 通道 扩展 融合 循环 胶囊 网络 多模态 情感 识别 方法 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于西安理工大学,未经西安理工大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202310567609.6/,转载请声明来源钻瓜专利网。