[发明专利]工作状态的确定方法、装置、电子设备及存储介质

说明书

本申请提供的一种工作状态的确定、装置、电子设备及存储介质，所述方法包括：采集目标对象的视频信息；提取所述视频信息中目标帧序列，基于所述目标帧序列确定人脸特征图像序列和肢体特征图像序列；确定所述肢体特征图像序列对应的动作标签及各个动作标签对应的第一图像序列标号，并确定所述人脸特征图像序列对应的表情标签及各个表情标签对应的第二图像序列标号；基于各个第一图像序列标号、各个第二图像序列标号从各个动作标签对应的表情标签中确定各个动作标签对应的目标表情标签；基于各个动作标签、各个动作标签对应的第一图像序列标号和各个动作标签对应的目标表情标签确定所述目标对象的工作状态。

技术领域

本申请涉及数据处理技术领域，特别地涉及一种工作状态的确定方法、装置、电子设备及存储介质。

背景技术

在工业场景下制造业生产管理方面，传统监控员工工作效率及工作状态的方式大都是采用人工通过视频监控去监督的方法，这种传统方式不仅造成人员浪费，监管人员的工作负担重，而且因为人员长时间盯着监控录像容易疲劳，造成监管失效，且工作状态判断不准确。

发明内容

针对上述相关技术中的问题本申请提供一种工作状态的确定方法、装置、电子设备及存储介质，通过获取目标对象的视频信息；提取所述视频信息中目标帧序列，基于所述目标帧序列确定人脸特征图像序列和肢体特征图像序列；确定所述肢体特征图像序列对应的动作标签及各个动作标签对应的第一图像序列标号，并确定所述人脸特征图像序列对应的表情标签及各个表情标签对应的第二图像序列标号；基于各个第一图像序列标号、各个第二图像序列标号从各个动作标签对应的表情标签中确定各个动作标签对应的目标表情标签；基于各个动作标签各个动作标签对应的第一图像序列标号和各个动作标签对应的目标表情标签确定所述目标对象的工作状态，如此，能够实现自动进行监管，且工作状态判断更准确，从而有效减轻监管人员的工作负担。

本申请提供了一种工作状态的确定方法，所述方法包括：

采集目标对象的视频信息；

提取所述视频信息中目标帧序列，基于所述目标帧序列确定人脸特征图像序列和肢体特征图像序列；

确定所述肢体特征图像序列对应的动作标签及各个动作标签对应的第一图像序列标号，并确定所述人脸特征图像序列对应的表情标签及各个表情标签对应的第二图像序列标号；

基于各个第一图像序列标号、各个第二图像序列标号从各个动作标签对应的表情标签中确定各个动作标签对应的目标表情标签；

基于各个动作标签、各个动作标签对应的第一图像序列标号和各个动作标签对应的目标表情标签确定所述目标对象的工作状态。

在一些实施例中，所述基于各个动作标签、各个动作标签对应的第一图像序列标号和各个动作标签对应的目标表情标签确定所述目标对象的工作状态，包括：

基于各个动作标签和各个动作标签对应的目标表情标签确定初始矩阵的矩阵值，以得到目标矩阵，其中，所述初始矩阵的纵列为表情标签，所述初始矩阵的横列为动作标签，当各个动作标签存在对应的表情标签时，在所述初始矩阵中对应位置用矩阵值1表示；

基于所述目标矩阵和各个动作标签对应的第一图像序列标号的数量确定在三维模型中的各个情绪要素状态坐标点，其中，所述三维模型中Z轴表示第一图像序列标号的数量，X轴表示表情标签，Y轴表示动作标签；

基于各个动作标签对应的各个情绪要素状态坐标点，确定各个动作标签对应的情绪要素状态向量；

基于各个动作标签对应的情绪要素状态向量，确定各个动作标签对应的融合情绪要素状态向量；

基于各个动作标签对应的融合情绪要素状态向量确定所述目标对象的工作状态。

在一些实施例中所述基于各个动作标签对应的各个情绪要素状态坐标点，确定各个动作标签对应的情绪要素状态向量，包括：