[发明专利]乘员状态检测方法及装置、电子设备和存储介质

说明书

本公开涉及一种乘员状态检测方法及装置、电子设备和存储介质，通过获取至少一个包括至少两张二维场景图像的二维场景图像组和车辆内部的目标三维空间，每个二维场景图像组通过车辆内部至少两个图像采集装置在同一时刻采集得到。根据目标三维空间对每个二维场景图像组进行身体特征点匹配，得到身体特征点在目标三维空间中的位置的三维特征信息。根据至少一个身体特征点的三维特征信息检测对应乘员的状态。本公开实施例能够通过多个图像采集装置采集车辆内部场景，解决单个图像采集装置采集场景存在盲区的问题。同时，还通过多个车辆内场景的三维特征信息确定乘员在车内的运动情况，以实现对乘员状态进行检测。

技术领域

本公开涉及计算机技术领域，尤其涉及一种乘员状态检测方法及装置、电子设备和存储介质。

背景技术

如今随着车辆智能化进程不断推进，同时为了满足驾驶员或其他乘客对安全性、舒适性以及娱乐性等各种需求，众多汽车终端厂商引入了DMS，OMS等智能车舱设备进行乘员状态检测。由于车舱内部空间较大、车内座椅等存在遮挡物等问题，当前车舱设备存在检测盲区的问题。同时，相关技术基于智能车舱设备采集的二维图像进行状态检测，难以对景深方向进行检测。

发明内容

本公开提出了一种乘员状态检测方法及装置、电子设备和存储介质，旨在对车内场景进行准确的检测。

根据本公开的第一方面，提供了一种乘员状态检测方法，包括：

获取至少一个二维场景图像组，每个所述二维场景图像组包括至少两张二维场景图像，每个所述二维场景图像组通过车辆内部至少两个图像采集装置在同一时刻采集得到；

确定所述车辆内部的目标三维空间；

根据所述目标三维空间对每个所述二维场景图像组进行身体特征点匹配，得到所述身体特征点的三维特征信息，所述三维特征信息用于表征车辆内部乘员的身体特征点在所述目标三维空间中的位置；

根据至少一个所述身体特征点的三维特征信息检测对应的乘员的状态。

在一种可能的实现方式中，所述根据所述目标三维空间对每个所述二维场景图像组进行身体特征点匹配，得到所述身体特征点的三维特征信息包括：

提取所述二维场景图像组中的每个二维场景图像中身体特征点；

基于提取出的所述身体特征点，对每个所述二维场景图像组中的至少两个所述二维场景图像进行身体特征点匹配，得到至少一个身体特征点组；

确定每个所述身体特征点组在所述目标三维空间对应的三维特征点；

根据同一时刻每个所述三维特征点得到所述身体特征点对应的三维特征信息。

在一种可能的实现方式中，所述确定每个所述身体特征点组在所述目标三维空间对应的三维特征点包括：

对于每个所述特征点组，确定采集其中每个身体特征点对应二维场景图像的图像采集装置的外参；

根据每个所述身体特征点对应图像采集装置的外参和在所述二维场景图像中的位置确定在所述目标三维空间中的映射线；

确定每个所述身体特征点组中至少两个所述身体特征点的映射线交点为三维特征点。

在一种可能的实现方式中，所述根据至少一个所述身体特征点的三维特征信息检测对应的乘员的状态包括：

根据至少一个所述身体特征点对应的三维特征信息确定所述乘员的三维动作；

根据所述三维动作对至少一个所述乘员进行状态检测。

在一种可能的实现方式中，所述根据至少一个所述身体特征点的三维特征信息检测对应的乘员的状态包括：