[发明专利]一种基于图文匹配的智能人机交互方法及装置有效
申请号: | 202110587993.7 | 申请日: | 2021-05-27 |
公开(公告)号: | CN113420783B | 公开(公告)日: | 2022-04-08 |
发明(设计)人: | 印二威;谢良;张珺倩;张敬;闫慧炯;罗治国;张亚坤;艾勇保;闫野 | 申请(专利权)人: | 中国人民解放军军事科学院国防科技创新研究院 |
主分类号: | G06K9/62 | 分类号: | G06K9/62;G06V10/75;G06V10/40;G06F40/284;G06F40/30;G06N3/04;G06N3/08;G10L15/26 |
代理公司: | 北京丰浩知识产权代理事务所(普通合伙) 11781 | 代理人: | 李学康 |
地址: | 100071 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于图文匹配的智能人机交互方法及装置,属于计算机视觉领域。所述方法包括:收集用户的语音信息转为文字序列,使用自然语言处理技术提取文字序列中的目标特征;采集真实环境图像,并采用深度卷积神经网络对所述原始图像数据提取自然图像特征;对原始图像中的各个目标与文字序列中的目标分别进行匹配度计算,取匹配度最大的图像中目标为匹配结果,并转化为机器指令。该发明结合计算机视觉技术与自然语言处理技术实现复杂命令与真实图像的匹配,能够根据一条自然语言表达指令,自动定位图像中的相关实体目标,使得交互过程更加自然,能够应用于助残机器人、救援机器人、特种机器人等广泛场景。 | ||
搜索关键词: | 一种 基于 图文 匹配 智能 人机交互 方法 装置 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国人民解放军军事科学院国防科技创新研究院,未经中国人民解放军军事科学院国防科技创新研究院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202110587993.7/,转载请声明来源钻瓜专利网。
- 上一篇:一种基于头部时序信号校正的眼动交互方法及装置
- 下一篇:排水管网的监测方法