[发明专利]司乘状态检测方法、装置及计算机可读存储介质

说明书

本发明提供一种司乘状态检测方法,包括：获取司乘人脸图像，以预设数层卷积算法提取所述司乘人脸图像的特征信息，所述特征信息包括图像光流及图像特征；将提取到的所述特征信息与上一帧司乘人脸图像的特征信息融合，以融合结果确认司乘人员作业状态；在确认所述司乘人员作业状态异常时，输出语音提醒信息。本发明还公开了一种司乘状态检测装置及计算机可读存储介质，本发明采用数字高清，ISP图像处理技术规避了光线对图像采集的干扰，并且通过边缘端计算技术，提高了图像采集的速度以及处理效率，能够快速确定司乘人员工作状态，并以此提高了行车安全。

技术领域

本发明涉及行车安全监视领域，尤其涉及一种司乘状态检测方法、装置及计算机可读存储介质。

背景技术

随着我国铁路的快速发展，铁路运输安全问题是现代交通永恒不变的主题，越来越被重视。机车乘务员在机车运行中起着核心作用，他直接决定了列车能否正常运行，他们是保证一趟列车安全运行的重要关键。如何让他们在行驶过程当中始终保持集中注意力，不让精神状态不佳威胁到列车正常运行，这是非常重要的。因此，对机车乘务员的安全管理成了重中之重。在机车乘务员安全管理方面,针对乘务员值乘过程中安全关键项点的作业标准,制定标准化要求,依照系统科学的方法，通过分析乘务员一次出乘标准作业程序，列出安全节点，例如，在列车运行中可能出现的机车乘务员行车精神不振、视野偏离、盹睡，间断瞭望等重大安全隐患问题，非常有必要通过技术手段在发生上述问题的同时给予报警提示，及时纠正乘务员的驾驶状态，防控风险于前期，保证行车安全。

发明内容

本发明的主要目的在于提供一种司乘状态检测警方法、装置及计算机可读存储介质，解决了行车过程中机车乘务员行车由于精神不振、视野偏离、盹睡，间断瞭望等工作状态可能导致的安全隐患问题的技术问题。

为实现上述目的，本发明提供的一种司乘状态检测警方法，包括：

获取司乘人脸图像，以预设数层卷积算法提取所述司乘人脸图像的特征信息，所述特征信息包括图像光流及图像特征；

将提取到的所述特征信息与上一帧司乘人脸图像的特征信息融合，以融合结果确认司乘人员作业状态；

在确认所述司乘人员作业状态异常时，输出语音提醒信息。

可选地，所述以预设数层卷积算法提取所述司乘人脸图像的特征信息的步骤，包括：

裁剪所述司乘人脸图像的局部图像特征，在所述局部图像特征中提取特征子网，所述特征子网包括图像特征子网及光流特征子网；

根据所述特征子网生成特征信息。

可选地，所述根据所述特征子网生成特征信息的步骤，包括：

将所述局部图像特征的图像特征子网及光流特征子网融合，根据融合结果生成特征信息。

可选地，所述将提取到的所述特征信息与上一帧司乘人脸图像的特征信息融合的步骤，包括：

将所述特征信息输入所述预设数层卷积算法，根据所述预设数层卷积算法输出全局区域特征信息；

降维所述全局区域特征信息，将降维结果输入softmax层分类。

可选地，所述司乘状态检测方法还包括：

确认所述特征信息的特征数据；

将所述特征数据存储至所述预设数层卷积算法对应的人脸特征数据库。

可选地，所述在确认所述司乘人员作业状态异常时，输出语音提醒信息的步骤同时，还包括：

确认所述司乘人脸图像所在视频帧；

基于所述视频帧的时间节点将预设时间范围内的视频信息存储至本地存储区域。