[发明专利]一种基于视觉传感器的驾驶员监控系统

权利要求书

1.一种基于视觉传感器的驾驶员监控系统，其特征在于，安装于车辆中，所述系统包括：红外摄像头模块、可见光摄像头模块、监控控制器和报警模块，所述红外摄像头模块、所述可见光摄像头模块和所述报警模块分别与所述监控控制器之间通信连接；

所述红外摄像头模块，用于采集驾驶员的第一图像；将所述第一图像发送至所述监控控制器；

所述可见光摄像头模块，用于采集所述驾驶员的第二图像；将所述第二图像发送至所述监控控制器；

所述监控控制器，用于获取所述第一图像和所述第二图像；根据所述第一图像确定所述驾驶员单位时间内眼睛闭合一定比例所占的时间PERCLOS；对所述第二图像进行预处理；将预处理后的第二图像输入分类模型得到分类结果，所述分类结果用于指示所述驾驶员是否处于疲劳状态和/或分神状态；根据所述PERCLOS和所述分类结果确定报警级别；

所述报警模块，用于获取所述报警级别；根据所述报警级别控制对应的报警组件进行报警。

2.根据权利要求1所述系统，其特征在于，

所述疲劳状态包括：打哈欠和点头中的至少一种。

所述分神状态包括：打电话、看手机、抽烟和左顾右盼中的至少一种。

3.根据权利要求1所述系统，其特征在于，所述监控控制器采用多核异构系统级芯片SoC，所述SoC包括进阶精简指令集机器ARM核、第一数字信号处理器DSP核和第二DSP核；

所述第一DSP核，用于对所述驾驶员的视线进行跟踪，并执行所述根据所述第一图像确定所述PERCLOS的步骤；

所述第二DSP核，用于执行所述对所述第二图像进行预处理；将预处理后的第二图像输入分类模型得到分类结果的步骤，所述分类模型为卷积神经网络CNN模型；

所述ARM核，用于执行所述根据所述PERCLOS和所述分类结果确定报警级别的步骤。

4.根据权利要求1所述系统，其特征在于，所述报警级别包括轻度、中度和重度；所述报警模块分别与仪表盘、扬声器和座椅振动器相连；所述报警模块，用于：

在所述报警级别为轻度时，触发所述仪表盘指示灯亮并触发所述扬声器输出第一时长的声音警示；

在所述报警级别为中度时，触发所述扬声器输出第二时长的声音警示并触发所述座椅振动器进行第三时长的座椅震动，所述第二时长大于所述第一时长；

在所述报警级别为重度时，触发所述扬声器输出声音警示并触发所述座椅振动器进行座椅震动，直至所述监控触发器后续检测出报警级别降低时停止。

5.根据权利要求1所述系统，其特征在于，所述红外摄像头模块和所述可见光摄像头模块以相同的图像采集帧率采集图像，所述图像采集帧率根据所述监控控制器的图像处理能力确定。

6.根据权利要求1所述系统，其特征在于，所述红外摄像头模块连接有近红外发光二极管LED模块，所述近红外LED模块，用于：

接收所述红外摄像头模块的同步开关控制信号；

根据所述同步开关控制信号通过LED驱动电路控制LED灯发射近红外光照射所述驾驶员；或者，通过LED驱动电路控制LED灯停止发射近红外光。

7.根据权利要求6所述系统，其特征在于，所述红外摄像头模块和所述近红外LED模块安装于所述车辆中仪表盘的上方。

8.根据权利要求1所述系统，其特征在于，所述可见光摄像头模块安装于所述车辆的左侧A柱或者后视镜位置。

9.根据权利要求1所述系统，其特征在于，所述监控控制器安装于所述车辆的驾驶舱前部。

10.根据权利要求1至9任一所述系统，其特征在于，所述红外摄像头模块和所述可见光摄像头模块分别通过线缆与所述监控控制器相连。