[发明专利]多模态融合的通讯方法、装置、头戴设备及存储介质有效
| 申请号： | 201911019740.9 | 申请日： | 2019-10-24 |
| 公开（公告）号： | CN110865705B | 公开（公告）日： | 2023-09-19 |
| 发明（设计）人： | 印二威;鲁金朋;马权智;谢良;邓宝松;闫野 | 申请（专利权）人： | 中国人民解放军军事科学院国防科技创新研究院;天津（滨海）人工智能军民融合创新中心 |
| 主分类号： | G06F3/01 | 分类号： | G06F3/01;G06V40/20;G06V10/80;G06N3/0464;G10L15/22;G06N3/04;G06V40/16 |
| 代理公司： | 北京辰权知识产权代理有限公司 11619 | 代理人： | 刘广达 |
| 地址： | 100071*** | 国省代码： | 北京;11 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本申请提出一种多模态融合的通讯方法、装置、头戴设备及存储介质。该方法包：获取用户的语音信息、唇部图像信息及脸部肌电信息；根据所述语音信息、所述唇部图像信息及所述脸部肌电信息，通过预先训练的环境评估模型确定当前环境对应的模型参数；根据所述模型参数、所述语音信息、所述唇部图像信息及所述脸部肌电信息，识别所述用户的指令信息。在本申请实施例中，唇部图像与脸部肌电信息联动信号处理，使交互通信系统的环境适应能力、指令识别准确率上有较大的提升。且设备佩戴简易，使用简单，易于操作。采集器位置相对固定，减小了每次信号采集的差异性，有利于提高模型预测的准确性。 | ||
| 搜索关键词： | 多模态 融合 通讯 方法 装置 设备 存储 介质 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于中国人民解放军军事科学院国防科技创新研究院;天津（滨海）人工智能军民融合创新中心，未经中国人民解放军军事科学院国防科技创新研究院;天津（滨海）人工智能军民融合创新中心许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201911019740.9/，转载请声明来源钻瓜专利网。
- 上一篇：自动化测试辅助软件系统
- 下一篇：一种夹紧装置及电缆剥皮机
