[发明专利]一种人脸追踪方法、系统、终端及存储介质在审
申请号: | 202011509094.7 | 申请日: | 2020-12-18 |
公开(公告)号: | CN112488064A | 公开(公告)日: | 2021-03-12 |
发明(设计)人: | 张国辉;戴磊 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/62 |
代理公司: | 深圳国新南方知识产权代理有限公司 44374 | 代理人: | 周雷 |
地址: | 518000 广东省深圳市福田区福*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 追踪 方法 系统 终端 存储 介质 | ||
本发明公开了一种人脸追踪方法、系统、终端及存储介质,包括:对当前图像帧进行人脸检测,得到第一人脸检测框,并根据所述第一人脸检测框剪裁得到人脸区域;将所述人脸区域输入训练好的第一检测模型,通过所述第一检测模型输出带有置信度的人脸关键点;将所述人脸区域以及所述人脸关键点输入训练好的第二检测模型,通过所述第二检测模型输出所述人脸关键点的坐标;将所述人脸关键点的坐标按照设定比例进行外扩,得到人脸关键点外扩框,并将所述人脸关键点外扩框作为第二人脸检测框,根据所述第二人脸检测框对下一帧视频图像进行人脸追踪。通过上述方法可以提高人脸追踪的精度,且运算速度更快。
技术领域
本发明涉及人脸追踪技术领域,特别是涉及一种人脸追踪方法、系统、终端及存储介质。
背景技术
人脸追踪即在检测到人脸的前提下,在后续帧中继续捕获人脸的位置及大小等信息。目前,人脸追踪技术已广泛应用于金融、安防、零售等多个领域,满足身份核验、人脸考勤、闸机通行等业务需求。以人脸考勤为例,目前人脸门禁考勤场景中使用人脸1:n识别算法,具体为,在每帧进行视频解帧之后分别进行人脸检测、人脸关键点检测、活体识别以及人脸识别操作。该算法的弊端在于,同一个人需要重复识别,会浪费大量算力。另外,同一个人站在镜头前的时候,由于受姿态、动作、互相遮挡、光照变化等影响会存在质量较差的帧,容易导致人脸识别错误。
为了改进上述不足,通过在人脸检测之后加入一个人脸追踪模块,根据前后帧的人脸检测框之间的相对位置来判断哪些人脸属于同一个人,其识别流程如图1所示。但由于人脸检测模型需要对整个画面进行扫描,当画面分辨率比较高时,需要的算力会比较大,难以在门禁面板机等小型嵌入式设备上执行,否则容易引起跳帧等问题,降低识别能力,影响用户体验。
发明内容
本发明提供了一种人脸追踪方法、系统、终端及存储介质,能够在一定程度上解决现有技术中存在的不足。
为解决上述技术问题,本发明采用的技术方案为:
一种人脸追踪方法,包括:
对当前图像帧进行人脸检测,得到第一人脸检测框,并根据所述第一人脸检测框剪裁得到人脸区域;
将所述人脸区域输入训练好的第一检测模型,通过所述第一检测模型输出带有置信度的人脸关键点;
将所述人脸区域以及所述人脸关键点输入训练好的第二检测模型,通过所述第二检测模型输出所述人脸关键点的坐标;
将所述人脸关键点的坐标按照设定比例进行外扩,得到人脸关键点外扩框,并将所述人脸关键点外扩框作为第二人脸检测框,根据所述第二人脸检测框对下一帧视频图像进行人脸追踪。
本发明实施例采取的技术方案还包括:所述对当前图像帧进行人脸检测,得到第一人脸检测框包括:
判断所述当前图像帧是否是强制检测帧;其中,所述强制检测帧为每间隔预设帧数后需要进行人脸检测的图像帧;
如果是,则进行人脸检测,并对上一次人脸检测得到的人脸检测框进行更新,以得到第一人脸检测框;否则,无需进行人脸检测,并使用上一次人脸检测得到的人脸检测框作为第一人脸检测框。
本发明实施例采取的技术方案还包括:所述第一检测模型的训练数据包括两种生成方式生成的人脸区域;
第一种为:根据人脸图像的人脸检测框裁剪得到的人脸区域;
第二种为:对人脸图像进行关键点标注,得到关键点外接矩形,将所述关键点外接矩形按照设定比例进行外扩后裁剪得到的人脸区域。
本发明实施例采取的技术方案还包括:所述第一检测模型的训练过程为:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011509094.7/2.html,转载请声明来源钻瓜专利网。