[发明专利]一种人脸定位方法、装置、终端设备及存储介质

说明书

本发明提供了一种人脸定位方法、装置、终端设备及存储介质。所述方法包括：获取视频流中第一帧图像中的第一人脸框和多个第一人脸关键点；获取各所述第一人脸关键点在所述第一帧图像对应的图像坐标系中的各第一坐标；对各所述第一人脸关键点进行跟踪处理，得到跟踪处理结果；依据所述跟踪处理结果及各所述第一坐标，确定第二帧图像中的各所述第一人脸关键点对应的各第二人脸关键点，及各所述第二人脸关键点对应的第二坐标；所述第一帧图像为所述第二帧图像的上一帧图像；依据各所述第二坐标，确定所述第二帧图像中的与所述第一人脸框对应的第二人脸框。本发明能够减少人脸关键点定位所需的时间，可以满足人脸定位实时处理的需求。

技术领域

本发明涉及视频处理技术领域，特别是涉及一种人脸定位方法、装置、终端设备及存储介质。

背景技术

随着直播和短视频领域的飞速发展，在移动终端上出现了对人脸进行美颜、瘦脸和虚拟穿戴等需求，上述技术的实现依赖于视频流中的人脸关键点定位技术，主要分为两个部分：获取视频流中的人脸区域和定位人脸的关键点。

现有技术方案中，通常是对上述两部分分开进行处理的，人脸区域的获取是通过逐帧检测或者对人脸区域进行跟踪，然后在人脸框中进行关键点的定位。而人脸检测算法大多是基于卷积神经网络，对视频流中的每帧图像均做人脸检测和关键点定位过于耗时，无法满足实时处理的需求。

发明内容

本发明实施例所要解决的技术问题是提供一种人脸定位方法、装置、终端设备及存储介质，以解决现有技术中进行人脸检测过于耗时，无法满足实时处理需求的技术问题。

为了解决上述问题，本发明实施例提供了一种人脸定位方法，包括：获取视频流中第一帧图像中的第一人脸框和多个第一人脸关键点；获取各所述第一人脸关键点在所述第一帧图像对应的图像坐标系中的各第一坐标；对各所述第一人脸关键点进行跟踪处理，得到跟踪处理结果；依据所述跟踪处理结果及各所述第一坐标，确定第二帧图像中的各所述第一人脸关键点对应的各第二人脸关键点，及各所述第二人脸关键点对应的第二坐标；所述第一帧图像为所述第二帧图像的上一帧图像；依据各所述第二坐标，确定所述第二帧图像中的与所述第一人脸框对应的第二人脸框。

优选地，所述依据所述跟踪处理结果及各所述第一坐标，确定第二帧图像中的各所述第一人脸关键点对应的各第二人脸关键点，及各所述第二人脸关键点对应的第二坐标，包括：在所述第二帧图像渲染完成之后，依据所述跟踪处理结果，获取所述第二帧图像中跟踪得到的各所述第二人脸关键点；根据所述第一帧图像和所述第二帧图像，获取光流值；其中，所述光流值用于指示各所述第一人脸关键点与对应的各所述第二人脸关键点间的移动距离；依据所述光流值及各所述第一坐标，确定各所述第二人脸关键点对应的第二坐标。

优选地，在所述依据所述光流值及各所述第一坐标，确定各所述第二人脸关键点对应的第二坐标之后，还包括：依据各所述移动距离，计算得到平均距离；计算各所述移动距离与所述平均距离之间的差值；从各所述第二人脸关键点中获取所述差值小于差值中位数的一半的第二目标人脸关键点；依据各所述第二目标人脸关键点对应的初始第二坐标，对所有第二人脸关键点中除所述第二目标人脸关键点之外的其它第二人脸关键点对应的初始第二坐标进行校正；依据校正结果，确定各所述第二人脸关键点对应的第二坐标。

优选地，在所述获取视频流中第一帧图像中的第一人脸框和多个第一人脸关键点之后，还包括：对所述第一人脸框进行跟踪处理，得到所述第二帧图像中与所述第一人脸框对应的第二跟踪人脸框；在所述依据各所述第二坐标，确定所述第二帧图像中的与所述第一人脸框对应的第二人脸框之后，还包括：依据各所述第二坐标，判断各所述第二人脸关键点是否符合第一预设条件；在各所述第二人脸关键点不符合第一预设条件的情况下，获取所述第一人脸框的中心点和所述第二跟踪人脸框的中心点间的间隔距离；依据所述间隔距离、所述第一人脸框的长度和所述第一人脸框的宽度，判断所述第二跟踪人脸框是否符合第二预设条件；在所述第二跟踪人脸框符合所述第二预设条件的情况下，依据所述第二跟踪人脸框，通过预先训练好的神经网络模型，确定所述第二跟踪人脸框中的各第一预测人脸关键点。