[发明专利]人脸图像处理方法、装置、电子设备、存储介质及程序

说明书

本申请实施方式公开了一种人脸图像处理方法、用于训练神经网络的方法、装置、电子设备、计算机可读存储介质以及计算机程序，其中的方法主要包括：将待处理人脸图像输入至神经网络中；经由所述神经网络提取所述待处理人脸图像的包括至少一个三维不动关键点在内的人脸关键点信息。

技术领域

本申请涉及计算机视觉技术，尤其是涉及一种人脸图像处理方法、人脸图像处理装置、用于训练神经网络的方法、用于训练神经网络的装置、电子设备、计算机可读存储介质以及计算机程序。

背景技术

人脸关键点是人脸识别等诸多应用中不可或缺的一部分。准确的确定出人脸关键点，尤其是准确的确定出带有大表情或者存在大角度偏转的面部的人脸关键点，不仅有利于对人脸的相关位置进行矫正，而且有利于增强人脸的语义信息。

发明内容

本申请实施方式提供一种人脸图像处理技术方案。

根据本申请实施方式其中一个方面，提供了一种人脸图像处理方法，该方法包括：将待处理人脸图像输入至神经网络中；经由所述神经网络提取所述待处理人脸图像的包括至少一个三维不动关键点在内的人脸关键点信息。

在本申请一实施方式中，所述神经网络提取出的人脸关键点信息包括：待处理人脸图像中的位于未被遮挡位置处和/或被遮挡位置处的人脸关键点信息。

在本申请又一实施方式中，所述三维不动关键点包括：眼睑中心关键点、鼻子下沿中心关键点、嘴唇唇峰关键点、嘴唇中心关键点以及下巴中心关键点中的至少一个。

在本申请再一实施方式中，所述眼睑中心关键点包括：左眼上眼睑中心关键点、左眼下眼睑中心关键点、右眼上眼睑中心关键点以及右眼下眼睑中心关键点中的至少一个。

在本申请再一实施方式中，所述嘴唇中心关键点包括：上嘴唇上唇线中心关键点、上嘴唇下唇线中心关键点、下嘴唇上唇线中心关键点以及下嘴唇下唇线中心关键点中的至少一个。

在本申请再一实施方式中，所述嘴唇唇峰关键点包括：嘴唇左唇峰关键点以及嘴唇右唇峰关键点中的至少一个。

在本申请再一实施方式中，所述神经网络提取出的人脸关键点信息包括：68个、106个、240个、252个或270个人脸关键点信息。

在本申请再一实施方式中，所述神经网络是利用标注有：包括至少一个三维不动关键点在内的人脸关键点标注信息的人脸图像样本，训练而成的。

在本申请再一实施方式中，所述方法还包括：获取多个人脸图像样本，其中，所述人脸图像样本标注有：包括至少一个三维不动关键点在内的人脸关键点标注信息；利用所述多个人脸图像样本训练所述神经网络。

在本申请再一实施方式中，所述人脸图像样本标注有在人脸图像样本中的位于未被遮挡位置处和/或被遮挡位置处的人脸关键点标注信息。

在本申请再一实施方式中，所述人脸图像样本的人脸关键点标注信息包括：68个、106个、240个、252个或270个人脸关键点标注信息。

在本申请再一实施方式中，在所述利用人脸图像样本训练所述神经网络之前，还包括采用下述步骤获取所述人脸关键点标注信息：确定人脸图像样本中的人脸至少一个部位的曲线控制点；根据所述曲线控制点形成曲线；确定所述曲线上作为人脸图像样本的三维不动关键点；在人脸图像样本的三维不动关键点的至少一侧，选取曲线上的点；根据所述选取的点以及所述人脸图像样本的三维不动关键点形成人脸关键点标注信息。

在本申请再一实施方式中，所述确定所述曲线上作为人脸图像样本的三维不动关键点包括：确定所述曲线上的与人脸图像样本上标记的三维不动关键点的距离满足预定距离要求的点，将所述点作为人脸图像样本的三维不动关键点。