[发明专利]员工异常行为检测方法、装置及系统

权利要求书

1.一种员工异常行为检测方法，其特征在于，所述方法包括：

获取工位视频数据、区域视频数据及人员语音数据，解析所述工位视频数据及所述区域视频数据，分别得到工位图片组及区域图片组；

对所述工位图片组及所述区域图片组进行识别，得到多个人员情绪识别结果及多个人员行为识别结果，并对所述人员语音数据进行识别，得到多个语音识别结果；

根据所述人员情绪识别结果、人员行为识别结果、语音识别结果及预设的行为规则参数，生成异常行为检测结果。

2.根据权利要求1所述的方法，其特征在于，所述对所述工位图片组及所述区域图片组进行识别，得到多个人员情绪识别结果及多个人员行为识别结果包括：

对所述区域图片组中多个人员的移动轨迹进行识别，得到轨迹距离识别结果及人员走动识别结果；其中，所述轨迹距离识别结果及人员走动识别结果属于所述人员行为识别结果。

3.根据权利要求2所述的方法，其特征在于，所述根据所述人员情绪识别结果、人员行为识别结果、语音识别结果及预设的行为规则参数，生成异常行为检测结果包括：

若根据所述行为规则参数中的人员距离阈值，获知所述轨迹距离识别结果中的人员距离最小值小于所述人员距离阈值，则判断所述轨迹距离识别结果中的人员聚集时间是否大于所述行为规则参数中的聚集时间阈值，若是，则根据所述人员聚集时间生成人员聚集异常结果；其中，所述人员聚集异常结果属于所述异常行为检测结果；

若根据所述行为规则参数中的移动范围阈值，获知所述人员走动识别结果中的人员走动范围超过所述移动范围阈值，则判断所述人员走动识别结果中的人员走动时间是否大于所述行为规则参数中的走动时间阈值，若是，则根据所述人员走动时间生成人员走动异常结果；其中，所述人员走动异常结果属于所述异常行为检测结果。

4.根据权利要求1所述的方法，其特征在于，所述对所述工位图片组及所述区域图片组进行识别，得到多个人员情绪识别结果及多个人员行为识别结果还包括：

对所述工位图片组中的人员进行人脸识别，得到离岗识别结果及坐席变更识别结果；其中，所述离岗识别结果及坐席变更识别结果属于所述人员行为识别结果。

5.根据权利要求4所述的方法，其特征在于，所述根据所述人员情绪识别结果、人员行为识别结果、语音识别结果及预设的行为规则参数，生成异常行为检测结果还包括：

若根据所述行为规则参数中的离岗时间阈值，获知所述离岗识别结果中的人员离岗时间超过所述离岗时间阈值，则根据所述离岗时间阈值生成人员离岗异常结果；其中，所述人员离岗异常结果属于所述异常行为检测结果；

若根据所述行为规则参数中的人员面部特征信息，获知所述坐席变更识别结果中的面部识别特征信息与所述人员面部特征信息不一致，则判断所述坐席变更识别结果中的坐席变更时间是否大于所述行为规则参数中的变更时间阈值，若是，则根据所述坐席变更时间生成坐席变更异常结果；其中，所述坐席变更异常结果属于所述异常行为检测结果。

6.根据权利要求1所述的方法，其特征在于，所述对所述工位图片组及所述区域图片组进行识别，得到多个人员情绪识别结果及多个人员行为识别结果还包括：

对所述区域图片组中人员的步态进行识别，得到人员步态识别结果；其中，所述人员步态识别结果属于所述人员情绪识别结果。

7.根据权利要求6所述的方法，其特征在于，所述根据所述人员情绪识别结果、人员行为识别结果、语音识别结果及预设的行为规则参数，生成异常行为检测结果还包括：

若所述人员步态识别结果中的步态情绪结果为异常，则判断所述人员步态识别结果中的步态异常时间是否大于所述行为规则参数中的步态时间阈值，若是，则根据所述步态异常时间生成步态异常识别结果；其中，所述步态异常识别结果属于所述异常行为检测结果。