[发明专利]基于多模态特征的情绪定量方法、装置、设备及存储介质有效
申请号: | 202310674488.5 | 申请日: | 2023-06-08 |
公开(公告)号: | CN116415137B | 公开(公告)日: | 2023-10-10 |
发明(设计)人: | 王刚;刘蓬博;李楠茜;王静;丰雷;贺志阳;胡加学;赵景鹤;鹿晓亮;赵志伟 | 申请(专利权)人: | 讯飞医疗科技股份有限公司;首都医科大学附属北京安定医院 |
主分类号: | G06F18/213 | 分类号: | G06F18/213;G06F18/25;G06F18/23;G16H50/30;G06N3/0464;G06N3/08 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 王雨 |
地址: | 230088 安徽省合肥市*** | 国省代码: | 安徽;34 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本申请公开了一种基于多模态特征的情绪定量方法、装置、设备及存储介质,本申请获取到待测对象在设定谈话场景下的音频、视频数据、识别文本,该三种模态的数据全面覆盖待测对象的整体状态,所提供的信息更加丰富,为准确分析得到情绪参考数据提供了很好的数据基础。分别提取三种模态的数据的特征,得到文本特征、音频局部特征和视频局部特征,采用可学习的聚类模块分别对音频局部特征和视频局部特征进行维度压缩和聚类,获取更有价值的高维的音频全局特征和视频全局特征,将文本特征、音频全局特征和视频全局特征进行融合,并基于融合特征确定待测对象的情绪参考数据,实现了对待测对象的自动化检测,大大提升了检测效率。 | ||
搜索关键词: | 基于 多模态 特征 情绪 定量 方法 装置 设备 存储 介质 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于讯飞医疗科技股份有限公司;首都医科大学附属北京安定医院,未经讯飞医疗科技股份有限公司;首都医科大学附属北京安定医院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202310674488.5/,转载请声明来源钻瓜专利网。