[发明专利]一种监测司机开车使用手机的方法及装置

权利要求书

1.一种监测司机开车使用手机的方法，其特征在于，包括：

S1、获取摄像头采集的行驶车辆的RGB图像；

S2、通过已训练的二分支多级卷积神经网络得到所述行驶车辆的RGB图像中人体耳骨的坐标；

S3、通过已训练的Mask-RCNN对所述行驶车辆的RGB图像中的手机进行实例分割，得到已训练的Mask-RCNN输出的所述行驶车辆的RGB图像中手机部分的二值掩膜；

S4、根据所述行驶车辆的RGB图像中手机部分的二值掩膜，通过预置第一公式和预置第二公式计算所述行驶车辆的RGB图像中手机的质心坐标；

S5、根据所述人体耳骨的坐标与所述手机的质心坐标，通过预置第三公式计算所述人体耳骨与所述手机的欧几里得距离D；

S6、判断所述欧几里得距离D是否大于预设距离阈值，若是，则司机开车未使用手机，若否，则司机开车使用手机。

2.根据权利要求1所述的监测司机开车使用手机的方法，其特征在于，所述步骤S2具体包括：

通过一个10层的VGG-19卷积神经网络初始化和调整所述行驶车辆的RGB图像，得到特征矩阵F；

将所述特征矩阵F输入至已训练的二分支多级卷积神经网络中，得到所述行驶车辆的RGB图像中人体骨骼的全部坐标；

根据所述人体骨骼的全部坐标，确定所述行驶车辆的RGB图像中人体耳骨的坐标(x₀,y₀)。

3.根据权利要求1所述的监测司机开车使用手机的方法，其特征在于，所述预置第一公式为：

所述预置第二公式为：

其中，(x_i,y_i)(i＝1,2…n)为所述行驶车辆的RGB图像中手机部分的二值掩膜中值为1的元素的坐标，n为元素的个数；m_i＝1(i＝1,2…n)为所述行驶车辆的RGB图像中手机部分的二值掩膜中每一个像素点所表示的物体质量。

4.根据权利要求3所述的监测司机开车使用手机的方法，其特征在于，所述预置第三公式为：

5.一种监测司机开车使用手机的装置，其特征在于，包括：

获取单元，用于获取摄像头采集的行驶车辆的RGB图像；

第一坐标确定单元，用于通过已训练的二分支多级卷积神经网络得到所述行驶车辆的RGB图像中人体耳骨的坐标；

实例分割单元，用于通过已训练的Mask-RCNN对所述行驶车辆的RGB图像中的手机进行实例分割，得到已训练的Mask-RCNN输出的所述行驶车辆的RGB图像中手机部分的二值掩膜；

第二坐标确定单元，用于根据所述行驶车辆的RGB图像中手机部分的二值掩膜，通过预置第一公式和预置第二公式计算所述行驶车辆的RGB图像中手机的质心坐标；

距离计算单元，用于根据所述人体耳骨的坐标与所述手机的质心坐标，通过预置第三公式计算所述人体耳骨与所述手机的欧几里得距离D；

判断单元，用于判断所述欧几里得距离D是否大于预设距离阈值，若是，则司机开车未使用手机，若否，则司机开车使用手机。

6.根据权利要求5所述的监测司机开车使用手机的装置，其特征在于，所述第一坐标确定单元具体包括：

预处理子单元，用于通过一个10层的VGG-19卷积神经网络初始化和调整所述行驶车辆的RGB图像，得到特征矩阵F；

全部坐标确定子单元，用于将所述特征矩阵F输入至已训练的二分支多级卷积神经网络中，得到所述行驶车辆的RGB图像中人体骨骼的全部坐标；

第一坐标确定子单元，用于根据所述人体骨骼的全部坐标，确定所述行驶车辆的RGB图像中人体耳骨的坐标(x₀,y₀)。