[发明专利]车辆的交互方法及装置、电子设备、存储介质和车辆

权利要求书

1.一种车辆的交互方法，其特征在于，包括：

控制设置在车辆的车舱外的摄像头采集车舱外的视频流；

根据所述车舱外的视频流进行人脸识别，得到车舱外的人脸识别结果；

响应于所述车舱外的人脸识别结果为人脸识别成功，控制车门解锁和/或打开，并控制设置在车舱内的显示设备显示数字人，以通过所述数字人进行人机交互。

2.根据权利要求1所述的方法，其特征在于，所述响应于所述车舱外的人脸识别结果为人脸识别成功，控制车门解锁和/或打开，并控制设置在车舱内的显示设备显示数字人，包括：

响应于所述车舱外的人脸识别结果为人脸识别成功，在控制车门解锁和/或打开的同时，控制设置在车舱内的显示设备显示数字人。

3.根据权利要求1或2所述的方法，其特征在于，

在人脸识别成功之前，所述显示设备处于关闭状态或者休眠状态，所述数字人对应的进程处于终止状态或者休眠状态；

所述控制设置在车舱内的显示设备显示数字人，包括：启动或唤醒设置在车舱内的显示设备；创建或唤醒所述数字人对应的进程，并运行所述数字人对应的进程，以将数字人显示在所述显示设备上。

4.根据权利要求3所述的方法，其特征在于，在启动或唤醒设置在车舱内的显示设备的同时，创建或唤醒所述数字人对应的进程。

5.根据权利要求3或4所述的方法，其特征在于，所述创建或唤醒所述数字人对应的进程，包括：

获取与所述车舱外的人脸识别结果对应的数字人形象信息和/或交互方式信息；

根据所述数字人形象信息和/或交互方式信息，创建或唤醒所述数字人对应的进程。

6.根据权利要求1至5中任意一项所述的方法，其特征在于，

在人脸识别成功之前，设置在所述车舱内的摄像头处于关闭状态或者休眠状态；

在所述得到车舱外的人脸识别结果之后，所述方法还包括：响应于所述车舱外的人脸识别结果为人脸识别成功，启动或唤醒设置在所述车舱内的摄像头，并控制所述车舱内的摄像头采集车舱内的视频流；基于所述车舱内的视频流，通过所述数字人与所述车辆的乘员进行交互。

7.根据权利要求6所述的方法，其特征在于，所述响应于所述车舱外的人脸识别结果为人脸识别成功，启动或唤醒设置在所述车舱内的摄像头，包括：

响应于所述车舱外的人脸识别结果为人脸识别成功，在控制车门解锁和/或打开的同时，启动或唤醒设置在所述车舱内的摄像头。

8.根据权利要求6或7所述的方法，其特征在于，所述基于所述车舱内的视频流，通过所述数字人与所述车辆的乘员进行交互，包括：

根据所述车舱内的视频流中的图像，检测乘员的位置信息；所述乘员的位置信息包括：所述乘员在所述图像中的第一相对位置信息，和/或，所述乘员在所述车舱内的第二相对位置信息；

根据所述乘员的位置信息，在所述显示设备上生成并显示所述数字人转向所述乘员的动画。

9.根据权利要求8所述的方法，其特征在于，所述根据所述车舱内的视频流中的图像，检测所述乘员的位置信息，包括：

在所述图像对应的图像坐标系中，检测所述乘员的至少一个部位所在的图像坐标区域；

将所述图像坐标区域作为所述乘员在所述图像中的所述第一相对位置信息；和/或，根据所述图像坐标系与所述车舱内的空间坐标系之间的映射关系，确定所述图像坐标区域对应的车舱内空间坐标区域，并将所述车舱内空间坐标区域作为所述乘员在所述车舱内的所述第二相对位置信息。

10.根据权利要求8或9所述的方法，其特征在于，所述根据所述乘员的位置信息，在所述显示设备上生成并显示所述数字人转向所述乘员的动画，包括：

根据预先建立的位置信息与数字人的朝向之间的映射关系，确定与所述乘员的位置信息对应的目标朝向；

在所述显示设备上生成并显示所述数字人转向所述目标朝向的动画。