[发明专利]确定车辆乘员的活动的方法和系统

权利要求书

1.一种确定车辆乘员的活动的计算机实现的方法，

所述计算机实现的方法包括由计算机硬件组件执行的以下步骤：

-使用至少一个传感器获取所述乘员的传感器数据；

-基于所述传感器数据确定所述乘员的身体的多个预定部位的相应的二维坐标或三维坐标；

-基于所述传感器数据和所述二维坐标或三维坐标确定所述传感器数据的示出所述乘员的预定身体部位的至少一部分；以及

-基于所述二维坐标或三维坐标以及所述传感器数据的所述至少一部分确定所述乘员的所述活动。

2.根据权利要求1所述的计算机实现的方法，

其中，所述传感器数据包括图像和其它传感器数据；

其中，所述传感器数据的所述至少一部分包括所述图像的至少一部分。

3.根据权利要求2所述的计算机实现的方法，

其中，所述图像包括多个强度像素，各个强度像素指示在相应强度像素处接收到的预定波长或波长范围的光的强度；并且

其中，所述其它传感器数据包括多个距离像素，各个距离像素指示所述其它传感器与对应于相应距离像素的对象之间的距离。

4.根据权利要求1至3中任一项所述的计算机实现的方法，

其中，所述乘员的所述预定身体部位包括所述乘员的一只手和/或所述乘员的面部。

5.根据权利要求1至4中任一项所述的计算机实现的方法，

其中，获取多个图像和多个其它传感器数据；并且

其中，所述二维坐标或三维坐标是基于所述多个图像和所述多个其它传感器数据中的至少一者来确定的。

6.根据权利要求1至5中任一项所述的计算机实现的方法，

其中，所述活动是基于神经网络来确定的。

7.根据权利要求1至6中任一项所述的计算机实现的方法，

其中，所述活动是基于softmax方法来确定的。

8.根据权利要求1至7中任一项所述的计算机实现的方法，

其中，确定所述活动包括将驾驶员的动作分类成多个动作类别中的一个或更多个类别。

9.根据权利要求8所述的计算机实现的方法，

其中，分类包括确定概率向量，其中，所述概率向量中的各个项指示所述多个动作类别中的各个类别的相应概率。

10.根据权利要求8至9中任一项所述的计算机实现的方法，

其中，所述多个动作类别包括以下动作中的一个或更多个：进入汽车；离开汽车；将对象放入汽车；从汽车移除对象；将婴儿座椅放入汽车；从汽车移除婴儿座椅；将儿童放入汽车；从汽车带走儿童；将婴儿放入汽车；从汽车带走婴儿；系好安全带；解开安全带；与电话交互；握住电话；主动控制电话；在电话上打字；进行通话；与对象交互；与书交互；与杂志交互；与笔记本电脑交互；与平板电脑交互；与方向盘交互；吸烟；吃；喝；操作车辆信息娱乐系统；操作车辆控制装置。

11.一种计算机系统，所述计算机系统包括多个计算机硬件组件，所述多个计算机硬件组件被配置成执行根据权利要求1至10中的至少一项所述的计算机实现的方法的步骤。

12.根据权利要求11所述的计算机系统，所述计算机系统还包括图像传感器和至少一个其它传感器。

13.根据权利要求12所述的计算机系统，

其中，所述至少一个其它传感器包括飞行时间摄像头。

14.根据权利要求12或13中任一项所述的计算机系统，其中，所述图像传感器和所述至少一个其它传感器被设置成组合的传感器。

15.一种非暂时性计算机可读介质，所述非暂时性计算机可读介质包括用于执行根据权利要求1至10中的至少一项所述的计算机实现的方法的指令。