[发明专利]基于视觉的驾驶员脱手检测方法及系统

说明书

本发明公开了一种基于视觉的驾驶员脱手检测方法及系统，包括：采集驾驶员手部方向盘图像；基于驾驶员手部方向盘图像的特征信息和景深信息，检测驾驶员的手是否在方向盘上；根据驾驶员的手部是否在方向盘上的检测结果和车辆方向盘状态信息，得到驾驶员脱手状态。本发明的基于视觉的驾驶员脱手检测方法及系统，基于视觉方案同步融合间接测量进行驾驶员脱手检测，通过采集图像，辅助车辆状态监测数据综合分析，可以准确判断驾驶员脱手的状态，提升汽车智能化水平和安全性能，与电容式方向盘的驾驶员脱手监测方案相比，有效降低了系统成本；基于驾驶员手部方向盘图像的特征信息和景深信息检测驾驶员的手是否在方向盘上，可以提升检测精度。

技术领域

本发明涉及自动驾驶技术领域，尤其涉及一种基于视觉的驾驶员脱手检测方法及系统。

背景技术

随着智能化技术和汽车产品的发展，市场和客户也越来越接受智能化的产品，而当前的技术水平还是在L3级以下，产品的使用过程中驾驶员还是不能脱离，但实际使用过程中，往往因为驾驶员过于相信系统而注意力不集中，以致紧急情况下驾驶员不能快速接管而出现事故的情况，因此，在产品设计上就需要保证驾驶员时刻关注车辆状态并保证驾驶员能立刻接管，驾驶员注意力监测以及方向盘脱手监测即为方案实现的主要手段。

因此，亟需一种基于视觉的驾驶员脱手检测方法及系统。

发明内容

本发明的目的是提供一种基于视觉的驾驶员脱手检测方法及系统，以解决上述现有技术中的问题，能够准确判断驾驶员脱手的状态，提升汽车智能化水平和安全性能，并降低成本。

本发明提供了一种基于视觉的驾驶员脱手检测方法，其中，包括：

采集驾驶员手部方向盘图像，其中，所述驾驶员手部方向盘图像包括驾驶员手部图像和方向盘图像；

基于驾驶员手部方向盘图像的特征信息和景深信息，检测驾驶员的手是否在方向盘上；

根据驾驶员的手部是否在方向盘上的检测结果和车辆方向盘状态信息，得到驾驶员脱手状态。

如上所述的基于视觉的驾驶员脱手检测方法，其中，优选的是，所述采集驾驶员手部方向盘图像，具体包括：

利用景深相机采集所述驾驶员手部方向盘图像。

如上所述的基于视觉的驾驶员脱手检测方法，其中，优选的是，所述景深相机设置在顶灯位置、前挡风玻璃的右上角、或前挡风玻璃的左上角。

如上所述的基于视觉的驾驶员脱手检测方法，其中，优选的是，所述基于驾驶员手部方向盘图像的特征信息和景深信息，检测驾驶员的手是否在方向盘上，具体包括：

对所述驾驶员手部方向盘图像进行特征提取，得到所述驾驶员手部方向盘图像的特征信息和景深信息；

根据所述驾驶员手部方向盘图像的特征信息，得到手部定位框和方向盘定位框的位置关系；

根据所述驾驶员手部方向盘图像的景深信息，得到手部和方向盘的相对景深数据；

根据所述手部定位框和方向盘定位框的位置关系和所述手部和方向盘的相对景深数据，确定驾驶员的手是否在方向盘上。

如上所述的基于视觉的驾驶员脱手检测方法，其中，优选的是，所述根据所述驾驶员手部方向盘图像的特征信息，得到手部定位框和方向盘定位框的位置关系，具体包括：

根据所述驾驶员手部方向盘图像的特征信息，计算手部特征的BOX属性和方向盘特征的BOX属性；

计算所述手部特征的BOX属性和所述方向盘特征的BOX属性的IoU值；

将所述IoU值作为所述手部定位框和方向盘定位框的位置关系。