[发明专利]一种人脸定位方法、装置、终端设备及存储介质有效
申请号: | 201910037053.3 | 申请日: | 2019-01-15 |
公开(公告)号: | CN109871760B | 公开(公告)日: | 2021-03-26 |
发明(设计)人: | 刘健;王顺利 | 申请(专利权)人: | 北京奇艺世纪科技有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06T7/70 |
代理公司: | 北京润泽恒知识产权代理有限公司 11319 | 代理人: | 莎日娜 |
地址: | 100080 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 定位 方法 装置 终端设备 存储 介质 | ||
1.一种人脸定位方法,其特征在于,包括:
获取视频流中第一帧图像中的第一人脸框和多个第一人脸关键点;
对所述第一人脸框进行跟踪处理,得到第二帧图像中与所述第一人脸框对应的第二跟踪人脸框;
获取各所述第一人脸关键点在所述第一帧图像对应的图像坐标系中的各第一坐标;对各所述第一人脸关键点进行跟踪处理,得到跟踪处理结果;
依据所述跟踪处理结果及各所述第一坐标,确定第二帧图像中的各所述第一人脸关键点对应的各第二人脸关键点,及各所述第二人脸关键点对应的第二坐标;所述第一帧图像为所述第二帧图像的上一帧图像;
依据各所述第二坐标,确定所述第二帧图像中的与所述第一人脸框对应的第二人脸框;
依据各所述第二坐标,判断各所述第二人脸关键点是否符合第一预设条件;
在各所述第二人脸关键点不符合第一预设条件的情况下,获取所述第一人脸框的中心点和所述第二跟踪人脸框的中心点间的间隔距离;
依据所述间隔距离、所述第一人脸框的长度和所述第一人脸框的宽度,判断所述第二跟踪人脸框是否符合第二预设条件;
在所述第二跟踪人脸框符合所述第二预设条件的情况下,依据所述第二跟踪人脸框,通过预先训练好的神经网络模型,确定所述第二跟踪人脸框中的各第一预测人脸关键点。
2.根据权利要求1所述的方法,其特征在于,所述依据所述跟踪处理结果及各所述第一坐标,确定第二帧图像中的各所述第一人脸关键点对应的各第二人脸关键点,及各所述第二人脸关键点对应的第二坐标,包括:
在所述第二帧图像渲染完成之后,依据所述跟踪处理结果,获取所述第二帧图像中跟踪得到的各所述第二人脸关键点;
根据所述第一帧图像和所述第二帧图像,获取光流值;其中,所述光流值用于指示各所述第一人脸关键点与对应的各所述第二人脸关键点间的移动距离;
依据所述光流值及各所述第一坐标,确定各所述第二人脸关键点对应的第二坐标。
3.根据权利要求2所述的方法,其特征在于,在所述依据所述光流值及各所述第一坐标,确定各所述第二人脸关键点对应的第二坐标之后,还包括:
依据各所述移动距离,计算得到平均距离;
计算各所述移动距离与所述平均距离之间的差值;
从各所述第二人脸关键点中获取所述差值小于差值中位数的一半的第二目标人脸关键点;
依据各所述第二目标人脸关键点对应的初始第二坐标,对所有第二人脸关键点中除所述第二目标人脸关键点之外的其它第二人脸关键点对应的初始第二坐标进行校正;
依据校正结果,确定各所述第二人脸关键点对应的第二坐标。
4.根据权利要求1所述的方法,其特征在于,在所述依据所述间隔距离、所述第一人脸框的长度和所述第一人脸框的宽度,判断所述第二跟踪人脸框是否符合第二预设条件之后,还包括:
在所述第二跟踪人脸框不符合所述第二预设条件的情况下,依据所述第二跟踪人脸框获取检测人脸框;
获取所述第二跟踪人脸框与所述检测人脸框之间的重叠区域和非重叠区域;
计算所述重叠区域和所述非重叠区域的比值;
在所述比值大于设定阈值的情况下,依据所述第二跟踪人脸框,通过所述神经网络模型,确定所述第二跟踪人脸框中的各第二预测人脸关键点;或者,
在所述比值小于等于所述设定阈值的情况下,依据所述检测人脸框,通过所述神经网络模型,确定所述检测人脸框中的各第三预测人脸关键点。
5.根据权利要求1所述的方法,其特征在于,在所述依据各所述第二坐标,确定所述第二帧图像中的与所述第一人脸框对应的第二人脸框之后,还包括:
判断所述第二帧图像是否为所述视频流中的最后一帧图像;
若是,则结束人脸定位处理流程。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇艺世纪科技有限公司,未经北京奇艺世纪科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910037053.3/1.html,转载请声明来源钻瓜专利网。