[发明专利]用于智能机器人的多模态交互方法及装置有效
申请号: | 201710034038.4 | 申请日: | 2017-01-18 |
公开(公告)号: | CN106933345B | 公开(公告)日: | 2020-02-07 |
发明(设计)人: | 魏彬彬 | 申请(专利权)人: | 北京光年无限科技有限公司 |
主分类号: | G06F3/01 | 分类号: | G06F3/01 |
代理公司: | 11611 北京聿华联合知识产权代理有限公司 | 代理人: | 张文娟;朱绘 |
地址: | 100000 北京市石景山区石景山*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供一种用于智能机器人的多模态交互方法和装置。其中,该方法包括以下步骤:获取用户的多模态输入信息;解析多模态输入信息中所涉及物体或话题;获取该用户对该物体或该话题产生的脑电波信息,确定多模态人机交互策略,输出对应的多模态输出数据,所述脑电波信息携带用户情绪信息。本发明通过基于脑电波确定的人机交互策略,结合该策略进行交互,可以增加交互话题,改善用户不良情绪,提高智能机器人的智能性和类人性,增强用户粘性。 | ||
搜索关键词: | 用于 智能 机器人 多模态 交互 方法 装置 | ||
【主权项】:
1.一种用于智能机器人的多模态交互方法,其特征在于,所述方法包括以下步骤:/n获取用户的多模态输入信息;/n解析多模态输入信息中所涉及物体信息或话题信息;/n获取该用户对该物体或该话题产生的脑电波信息,根据所述脑电波信息对应的情绪信息从预设的关于该用户的多模态人机交互策略中查找对应的多模态输出数据,按照预设优先级输出最匹配当前情绪的多模态输出数据,以改善用户不良情绪,其中,/n预先采集用户在训练环境中的用于诱发不同情绪的视觉信息和听觉信息、以及在相应信息刺激下产生的脑电波信息;/n对所述脑电波信息进行解析,确定用户的情绪;/n根据用户情绪对不同物体或话题进行分类,并按照喜好/讨厌程度对物体或话题设定优先级,基于这些信息进行深度学习,生成基于所述用户的关于物体或话题多模态输出的策略信息,/n在输出多模态输出数据之后,采集用户对所述多模态输出数据反馈的脑电波信息,以获取该用户的反馈情绪;/n将用户反馈的情绪重新确定多模态人机交互策略,输出相匹配的多模态输出数据。/n
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京光年无限科技有限公司,未经北京光年无限科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201710034038.4/,转载请声明来源钻瓜专利网。