[发明专利]一种用于智能驾驶的人机交互系统及方法在审
申请号: | 202010847941.4 | 申请日: | 2020-08-21 |
公开(公告)号: | CN112115797A | 公开(公告)日: | 2020-12-22 |
发明(设计)人: | 刘贝贝;何银山 | 申请(专利权)人: | 东风电驱动系统有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06F3/01 |
代理公司: | 武汉蓝宝石专利代理事务所(特殊普通合伙) 42242 | 代理人: | 廉海涛 |
地址: | 441000 湖北*** | 国省代码: | 湖北;42 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 用于 智能 驾驶 人机交互 系统 方法 | ||
1.一种用于智能驾驶的人机交互系统,其特征在于,所述系统包括:处理器以及所述处理器控制连接的车内摄像头、车外摄像头和显示装置;
所述车内摄像头实时获取车内人员的视线偏移度和偏移方向发送给所述处理器;
所述处理器根据所述视线偏移度和偏移方向控制所述车外摄像头进行实时转动,将实时拍摄到的画面在所述显示装置上进行显示。
2.根据权利要求1所述的系统,其特征在于,所述车内摄像头设置在所述车内座位的正前方,通过所述车内人员的头部姿态和眼睛注视方向确定所述驾驶员的视线偏移度和偏移方向;
所述处理器判断所述车内摄像头实时监测到所述车内人员视线移动且固定于车外任一景象的停留时间超过设定时长时,产生抓取特征信息命令。
3.根据权利要求1所述的系统,其特征在于,所述系统还包括:车内体感传感器;
所述车内体感传感器实时获取车内人员的体感信息,所述处理器判断所述体感信息超过设定范围时,产生抓取特征信息命令。
4.根据权利要求1所述的系统,其特征在于,所述系统还包括语音采集模块;
所述语音采集模块采集所述车内人员的语音发送给所述处理器;
所述处理器存储有语音指令和执行指令的对应关系的指令表,收到所述语音后对所述语音进行解析,判断所述语音属于所述指令表中的语音指令时,根据对应的执行指令产生执行命令,所述执行命令包括抓取特征信息命令。
5.根据权利要求2-4任一项所述的系统,其特征在于,所述系统与外部的云端服务器进行无线通信;
所述处理器产生所述抓取特征信息命令时,所述处理器将此时所述车外摄像头获取的图片或影像以及查询指令上传至所述云端服务器;所述云端服务器将所述图片或影像进行匹配和抓取相关信息后返回查询结果信息给对应的所述处理器。
6.根据权利要求5所述的系统,其特征在于,所述系统还包括语音播报模块;
所述处理器接收到所述图片或影像的查询结果信息后,通过所述显示装置进行显示和/或通过所述语音播报模块进行语音播报。
7.根据权利要求6所述的系统,其特征在于,所述显示装置为触摸屏显示器和/或虚拟现实显示装置;虚拟现实显示装置例如智能眼镜、虚拟现实头盔和虚拟现实投影仪等。
所述处理器产生所述抓取特征信息命令,通过所述触摸屏显示器和/或虚拟现实显示装置向所述车内人员进行显示是否执行所述查询指令的界面;
所述触摸屏显示器和/或虚拟现实显示装置接收到所述车内人员的触屏操作或手势操作为执行查询指令后,将此时所述车外摄像头获取的图片或影像以及查询指令上传至所述云端服务器。
8.根据权利要求7所述的系统,其特征在于,所述处理器收到所述查询结果信息后,通过所述触摸屏显示器和/或虚拟现实显示装置向所述车内人员进行显示是否接受查询结果信息推送的界面;
所述触摸屏显示器和/或虚拟现实显示装置接收到所述车内人员的触屏操作或手势操作为接受查询结果信息推送后,将所述查询结果信息通过所述显示装置和/或语音播报模块进行显示和/或播报。
9.一种基于权利要求1-8任一项所述的用于智能驾驶的人机交互系统的人机交互方法,其特征在于,所述方法包括:
实时获取车内人员的视线偏移度和偏移方向;
根据所述视线偏移度和偏移方向控制所述车外摄像头进行实时转动,将所述车外摄像头实时拍摄到的画面在所述显示装置上进行显示;
监测到所述车内人员视线移动且固定于车外任一景象的停留时间超过设定时长或者体感信息超过设定范围时,或接收到语音指令时,将此时所述车外摄像头获取的图片或影像以及查询指令上传至所述云端服务器;
接收所述云端服务器返回的查询结果信息。
10.根据权利要求9所述的方法,其特征在于,接收到所述云端服务器返回的查询结果信息后,通过所述显示装置进行显示所述查询结果信息,或者通过语音播报模块进行语音播报所述查询结果信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于东风电驱动系统有限公司,未经东风电驱动系统有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010847941.4/1.html,转载请声明来源钻瓜专利网。