[发明专利]一种跨模态上下文编码的对话情感识别方法及系统在审
| 申请号： | 202210377011.6 | 申请日： | 2022-04-12 |
| 公开（公告）号： | CN114463688A | 公开（公告）日： | 2022-05-10 |
| 发明（设计）人： | 李太豪;阮玉平;张晓宁;黄剑韬;郑书凯 | 申请（专利权）人： | 之江实验室 |
| 主分类号： | G06V20/40 | 分类号： | G06V20/40;G06V40/16;G06V40/20;G06F40/35;G06N3/04;G06N3/08 |
| 代理公司： | 杭州浙科专利事务所(普通合伙) 33213 | 代理人： | 孙孟辉 |
| 地址： | 311100 浙江省杭*** | 国省代码： | 浙江;33 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开一种跨模态上下文编码的对话情感识别方法及系统，该方法包括：步骤S1，将多轮对话中每条语句对应的视频模态、音频模态及文本模态信息分别进行编码，得到各语句对应的视觉模态、语音模态及文本模态表征向量序列；步骤S2，将多轮对话的视觉模态表征向量序列、语音模态表征向量序列及文本模态表征向量序列分别进行模态内的上下文编码，得到对话中各语句的单模态上下文编码表征；步骤S3，将对话中各语句的单模态上下文编码表征进行两两组合编码，得到对话中各语句跨模态融合的上下文编码；步骤S4，将跨模态融合的上下文编码表征进行自适应的信息汇总，并对语句的情感类别进行判断。本发明能够有效提升对话情感的识别精度。 | ||
| 搜索关键词： | 一种 跨模态 上下文 编码 对话 情感 识别 方法 系统 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于之江实验室，未经之江实验室许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202210377011.6/，转载请声明来源钻瓜专利网。
