[发明专利]一种多特征融合的人因风险实时检测方法及装置

权利要求书

1.一种多特征融合的人因风险实时检测方法，包括如下步骤：

步骤S1，采集反事故过程中的人因测试数据；

步骤S2，对采集的人因测试数据进行处理，实现对调度员的行为动作、语音信息以及生理压力变化的分析；

步骤S3，于数据处理过程中提取出反事故过程中调度员的行为、音频以及生理信号中多方面变化的特征；

步骤S4，利用数据的采样时间戳，将分别从视频、音频以及生理测量数据中提取的具有不同帧率的多种特征逐帧进行时间对准，实现多通道同步关联；

步骤S5，对所有特征数据指标进行权重分配，利用主成分分析方法确定各个指标的权重，最终将贡献率最大的若干特征代入综合评价函数，对调度员出现人为失误的风险进行评价。

2.如权利要求1所述的一种多特征融合的人因风险实时检测方法，其特征在于，步骤S2进一步包括

步骤S200，对人因测试数据中的视频数据利用肤色检测和运动检测结合的方式对调度员进行行为分析，获得调度员的运动量信息；

步骤S201，对人因测试数据中的音频数据采用音频处理方法进行调度员信息处理方面的分析；

步骤S202，对人因测试数据中的生理参数数据进行处理，得到反映调度员生理变化的数据。

3.如权利要求1所述的一种多特征融合的人因风险实时检测方法，其特征在于：于步骤S3中，于数据处理过程中提取视频中的调度员肢体运动速度、语音短时能量、短时过零率、谱熵和心率等特征。

4.如权利要求1所述的一种多特征融合的人因风险实时检测方法，其特征在于，步骤S4进一步包括：

步骤S400，在检测之前，将采集各人因测试数据的每个设备的系统时间同步到本地同一网络中的服务器时间从而所有的测量数据被统一收集。

步骤S401，将该些数据根据每个样本的时间戳进行对齐和整合，从而实现数据的同步关联。

5.如权利要求1所述的一种多特征融合的人因风险实时检测方法，其特征在于，于步骤S1中，采用心率检测设备记录调度员的心率信息，利用摄像装置采集反事故演习室的调度场景视频数据，并利用音频采集装置对调度电话进行录音，以获得音频数据。

6.一种多特征融合的人因风险实时检测装置，包括：

人因测试数据采集单元，用于采集反事故过程中的人因测试数据；

原始数据处理单元，用于对采集的人因测试数据进行处理，实现对调度员的行为动作、语音信息以及生理压力变化的分析；

特征提取单元，用于于所述原始数据处理单元的数据处理过程中提取出反事故过程中调度员的行为、音频以及生理信号中多方面变化的特征；

数据关联单元，用于利用数据的采样时间戳，将分别从视频、音频以及生理测量数据中提取的具有不同帧率的多种特征逐帧进行时间对准，实现多通道同步关联；

综合评价单元，用于对所有特征数据指标进行权重分配，利用主成分分析方法确定各个指标的权重，最终将贡献率最大的若干特征代入综合评价函数，对调度员出现人为失误的风险进行评价。

7.如权利要求6所述的一种多特征融合的人因风险实时检测装置，其特征在于，原始数据处理单元进一步包括：

视频数据处理单元，用于对人因测试数据中的视频数据利用肤色检测和运动检测结合的方式对调度员进行行为分析，获得调度员的运动量信息；

音频数据处理单元，用于对人因测试数据中的音频数据采用音频处理方法进行调度员信息处理方面的分析；

生理参数数据处理单元，用于对人因测试数据中的生理参数数据进行处理，得到反映调度员生理变化的数据。

8.如权利要求7所述的一种多特征融合的人因风险实时检测装置，其特征在于：所述特征提取单元于数据处理过程中提取视频中的调度员肢体运动速度、语音短时能量、短时过零率、谱熵和心率等特征。