[发明专利]基于人脸识别的监测方法、装置、存储介质及计算机设备在审
申请号: | 201910865404.X | 申请日: | 2019-09-12 |
公开(公告)号: | CN110580470A | 公开(公告)日: | 2019-12-17 |
发明(设计)人: | 陈梦莎 | 申请(专利权)人: | 深圳壹账通智能科技有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/62;G06N3/04 |
代理公司: | 11448 北京中强智尚知识产权代理有限公司 | 代理人: | 黄耀威;李月 |
地址: | 518000 广东省深圳市前海深港合作区前*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 表情信息 人脸图像 身份标识 计算机设备 存储介质 人脸识别 异常行为 表情 图像 抓取 教学效果 情绪变化 全班学生 自动识别 监测 记录 教学 教师 老师 分析 学生 | ||
1.一种基于人脸识别的监测的方法,其特征在于,包括:
获取待识别图像,并提取所述待识别图像中的所有人脸图像,确定每个所述人脸图像所对应的身份标识;
确定所述人脸图像中的表情信息,并判断所述表情信息是否异常;
在所述表情信息异常时,将与具有异常的所述表情信息的人脸图像相对应的身份标识作为异常身份标识,并生成所述异常身份标识的异常行为记录。
2.根据权利要求1所述的方法,其特征在于,所述确定每个所述人脸图像所对应的身份标识包括:
对所述人脸图像与人脸数据库进行匹配处理,将所述人脸数据库中与所述人脸图像相匹配的人脸的身份标识作为所述人脸图像的身份标识;或者
预先设置所述待识别图像中每个图像区域与身份标识之间的对应关系,根据所述人脸图像在所述待识别图像中所属的图像区域以及图像区域与身份标识之间的对应关系确定所述人脸图像所对应的身份标识;或者
基于设在不同位置的多个拍摄装置所采集的图像生成具有景深信息的待识别图像,并提取出所述待识别图像中具有景深信息的人脸图像;根据所述人脸图像的景深信息以及所述人脸图像在所述待识别图像中的位置确定所述人脸图像在世界坐标系下的三维坐标,将所述三维坐标所对应的用户的身份标识作为所述人脸图像的身份标识。
3.根据权利要求1所述的方法,其特征在于,所述确定所述人脸图像中的表情信息包括:
将所述人脸图像划分为多个部位,并确定每个部位所对应的人脸部位图像;
根据所有的所述人脸部位图像生成所述人脸图像的人脸特征序列,并将所述人脸特征序列作为预先训练好的表情识别模型的输入,根据所述表情识别模型确定所述人脸图像所对应的表情信息。
4.根据权利要求3所述的方法,其特征在于,所述根据所有的所述人脸部位图像生成所述人脸图像的人脸特征序列包括:
根据所述人脸部位图像在所述人脸图像中的位置分别确定每个所述人脸部位图像与其他人脸部位图像之间的邻接关系;
将具有最多邻接关系的人脸部位图像作为待定的图像序列的第一顺位图像,之后将所述第一顺位图像作为当前顺位图像,并将与所述当前顺位图像具有邻接关系的其他人脸部位图像作为下一顺位图像,重复上述基于当前顺位图像选取下一顺位图像的过程,直至遍历所有的所述人脸部位图像、且遍历所述人脸部位图像之间的所有邻接关系,最终生成包含所有的所述人脸部位图像、以及所述人脸部位图像之间的所有邻接关系的图像序列;
基于循环神经网络将所述图像序列转换为所述人脸图像的人脸特征序列。
5.根据权利要求3所述的方法,其特征在于,所述将所述人脸特征序列作为预先训练好的表情识别模型的输入,根据所述表情识别模型确定所述人脸图像所对应的表情信息包括;
连续获取多帧的待识别图像,从多帧的所述待识别图像中依次提取出具有相同身份标识的多帧的人脸图像,并确定每一帧的人脸图像的人脸特征序列;
将多帧的人脸图像的人脸特征序列作为预先训练好的表情识别模型的输入,根据所述表情识别模型确定多帧的所述人脸图像所对应的表情信息。
6.根据权利要求3-5任一所述的方法,其特征在于,在所述将所述人脸特征序列作为预先训练好的表情识别模型的输入之前,还包括:
确定训练样本,并建立表情识别模型,所述训练样本包括人脸样本图像的人脸特征序列以及与所述人脸样本图像相对应表情信息;
将所述人脸样本图像的人脸特征序列作为所述表情识别模型的输入、将与所述人脸样本图像相对应表情信息作为所述表情识别模型的输出,对所述表情识别模型进行训练,并生成训练好的表情识别模型。
7.根据权利要求1-5任一所述的方法,其特征在于,在所述生成所述异常身份标识的异常行为记录之后,还包括:
获取相关联系统中记录的所述异常身份标识的关联信息,根据所述关联信息以及所述异常行为记录生成所述异常身份标识的综合教学记录;或者
将所述异常行为记录发送至相关联系统,指示所述相关联系统基于所述相关联系统中记录的所述异常身份标识的关联信息以及所述异常行为记录生成所述异常身份标识的综合教学记录。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳壹账通智能科技有限公司,未经深圳壹账通智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910865404.X/1.html,转载请声明来源钻瓜专利网。