[发明专利]驾驶状态监测方法和装置、驾驶员监控系统、车辆

权利要求书

1.一种驾驶状态监测方法，其特征在于，包括：

对驾驶员图像进行驾驶员状态检测；所述驾驶员状态检测包括驾驶员预定分心动作检测；

根据驾驶员状态检测的结果，输出驾驶员的驾驶状态监测结果和/或进行智能驾驶控制；

所述对驾驶员图像进行预定分心动作检测，包括：所述预定分心动作为饮食动作/喝水动作/打电话动作/娱乐动作时，经第五神经网络对所述驾驶员图像进行所述饮食动作/喝水动作/打电话动作/娱乐动作相应的预设目标对象检测，得到预设目标对象的检测框；所述预设目标对象包括：手部、嘴部、眼部、目标物体；所述目标物体包括以下任意一类或多类：容器、食物、电子设备；根据所述预设目标对象的检测框确定分心动作的检测结果。

2.根据权利要求1所述的方法，其特征在于，所述驾驶员状态检测还包括以下任意一项或多项：驾驶员疲劳状态检测，驾驶员分心状态检测。

3.根据权利要求2所述的方法，其特征在于，所述对驾驶员图像进行驾驶员疲劳状态检测，包括：

对所述驾驶员图像中驾驶员的人脸至少部分区域进行检测，得到人脸至少部分区域的状态信息，所述人脸至少部分区域的状态信息包括以下任意一项或多项：眼睛睁合状态信息、嘴巴开合状态信息；

根据一段时间内的所述人脸至少部分区域的状态信息，获取用于表征驾驶员疲劳状态的指标的参数值；

根据用于表征驾驶员疲劳状态的指标的参数值确定驾驶员疲劳状态检测的结果。

4.根据权利要求3所述的方法，其特征在于，所述用于表征驾驶员疲劳状态的指标包括以下任意一项或多项：闭眼程度、打哈欠程度。

5.根据权利要求4所述的方法，其特征在于，所述闭眼程度的参数值包括以下任意一项或多项：闭眼次数、闭眼频率、闭眼持续时长、闭眼幅度、半闭眼次数、半闭眼频率；和/或，

所述打哈欠程度的参数值包括以下任意一项或多项：打哈欠状态、打哈欠次数、打哈欠持续时长、打哈欠频率。

6.根据权利要求2所述的方法，其特征在于，所述对驾驶员图像进行驾驶员分心状态检测，包括：

对所述驾驶员图像中驾驶员进行人脸朝向和/或视线方向检测，得到人脸朝向信息和/或视线方向信息；

根据一段时间内的所述人脸朝向信息和/或视线方向信息，确定用于表征驾驶员分心状态的指标的参数值；所述用于表征驾驶员分心状态的指标包括以下任意一项或多项：人脸朝向偏离程度，视线偏离程度；

根据用于表征所述驾驶员分心状态的指标的参数值确定驾驶员分心状态检测的结果。

7.根据权利要求6所述的方法，其特征在于，所述人脸朝向偏离程度的参数值包括以下任意一项或多项：转头次数、转头持续时长、转头频率；和/或，

所述视线偏离程度的参数值包括以下任意一项或多项：视线方向偏离角度、视线方向偏离时长、视线方向偏离频率。

8.根据权利要求6所述的方法，其特征在于，所述对驾驶员图像进行人脸朝向和/或视线方向检测，包括：

检测所述驾驶员图像的人脸关键点；

根据所述人脸关键点进行人脸朝向和/或视线方向检测。

9.根据权利要求8所述的方法，其特征在于，根据所述人脸关键点进行人脸朝向检测，得到人脸朝向信息，包括：

根据所述人脸关键点获取头部姿态的特征信息；

根据所述头部姿态的特征信息确定人脸朝向信息。

10.根据权利要求9所述的方法，其特征在于，所述根据所述人脸关键点获取头部姿态的特征信息，根据所述头部姿态的特征信息确定人脸朝向信息，包括：

经第一神经网络基于所述人脸关键点提取头部姿态的特征信息；

经第二神经网络基于所述头部姿态的特征信息进行人脸朝向估计，获得人脸朝向信息。