[发明专利]一种人车互动方法、系统及装置

说明书

本发明公开了一种人车互动方法、系统及装置，该方法包括：实时采集汽车外部环境的图像并进行虚拟化处理后，投影到汽车的车窗上；对用户进行检测，并识别获得对应的用户控制信号；根据获得的用户控制信号，对虚拟化处理后的图像再次进行对应的虚拟化处理后，投影到汽车的车窗上。本发明基于图像采集和汽车车窗，可以实现汽车内外用户与汽车外部环境的人车互动，体验感较强，而且较为真实，提高了用户体验，可广泛应用于汽车行业中。

技术领域

本发明涉及汽车智能控制领域，特别是涉及一种人车互动方法、系统及装置。

背景技术

随着科技的发展，汽车已经不仅仅是传统意义上的交通工具，还兼顾了娱乐、与乘客互动等功能。现有技术中的车载娱乐系统，跟普通的平板差别不大，而且仅仅是实现了娱乐功能，与乘客的互动功能较弱。而且，现有技术中的人车互动方案，一般是用户通过智能终端与车载系统之间进行数据交互，从而实现自动控制等，汽车在这个交互过程中，属于被动控制的对象，这种方式并不是真正意义上的人车互动。

名词解释

GPU：全称Graphics Processing Unit，指图形处理器，又称显示核心、视觉处理器、显示芯片，是一种专门在个人电脑、工作站、游戏机和一些移动设备上图像运算工作的微处理器；

AR：全称Augmented Reality，表示增强现实技术，是一种实时地计算摄影机影像的位置及角度并加上相应图像、视频、3D模型的技术，这种技术的目标是在屏幕上把虚拟世界套在现实世界并进行互动。

发明内容

为了解决上述的技术问题，本发明的目的是提供一种人车互动方法、系统及装置。

本发明解决其技术问题所采用的第一技术方案是：

一种人车互动方法，包括以下步骤：

实时采集汽车外部环境的图像并进行虚拟化处理后，投影到汽车的车窗上；

对用户进行检测，并识别获得对应的用户控制信号；

根据获得的用户控制信号，对虚拟化处理后的图像再次进行对应的虚拟化处理后，投影到汽车的车窗上。

进一步，所述实时采集汽车外部环境的图像并进行虚拟化处理后，投影到汽车的车窗上的步骤，具体包括：

实时地对汽车外部环境进行图像采集；

对采集的图像进行图像识别处理后，识别获得外部环境的各类场景物体，进而渲染形成虚拟图像；

将所形成的虚拟图像中的各类场景物体进行虚拟化处理后，投影到汽车的车窗上。

进一步，所述人车互动方法在投影过程中，还根据汽车车窗的参数对车窗进行曲面校正。

进一步，所述根据汽车车窗的参数对车窗进行曲面校正的步骤，具体包括：

获取汽车车窗的曲率参数后，计算获得车窗与用于进行投影的投影仪之间的几何关系及变换矩阵；

将待投影的图像进行分割，提取出图像的角点信息；

将角点信息与计算获得的几何关系及变换矩阵进行矩阵运算，使图像产生对应的非线性几何变形后，再进行投影。

进一步，所述对用户进行检测，并识别获得对应的用户控制信号的步骤，其具体为：

对用户进行语音检测或者姿态检测，并基于检测获得的语音信号或姿态信号，识别获得对应的用户控制信号。

进一步，所述虚拟化处理具体如下；

将物体转换为对应的虚拟化物体，

和/或