[发明专利]一种人像唇部的自动上妆方法、装置、设备和存储介质

说明书

本发明公开了一种人像唇部的自动上妆方法、装置、设备和存储介质，其中，该方法包括：从人像面部图像中提取嘴唇关键点，并检测人像面部图像中的人像面部朝向以及嘴唇形态，根据人像面部朝向以及嘴唇形态，调整所述嘴唇关键点的位置；检测所述人像面部图像中的人脸区域的皮肤色调和皮肤色号，根据所述皮肤色调和所述皮肤色号，从口红颜色样本库中选择目标口红颜色；依据所述嘴唇关键点的位置使用所述目标口红颜色进行融合上色。通过本发明可以更为准确地确定人像中的嘴角关键点，使自动上妆位置更为准确也更符合人类审美，同时，通过判断人像面部图像中的人脸区域的皮肤色调和皮肤色号，自动选择适合的口红色号进行上色，不再需要用户手动上色。

技术领域

本发明涉及音、视频及图像处理领域，具体涉及一种人像唇部的自动上妆方法、装置、设备和存储介质。

背景技术

随着智能终端图像处理技术的发展，智能终端在通过相机采集人像信息后，可以按照用户选择对所采集人像进行自动上妆，这项功能已经广泛应用于智能终端自身的照相、摄像应用，以及互联网直播时对实时采集的人像的处理。其中，对嘴唇上妆时，先通过人像对嘴唇轮廓进行确定，再依据用户选择的口红色号进行上色。

而在摄像或互联网直播过程中，人像尤其是面部区域几乎时刻处于动态变化中。而现有技术在嘴唇上妆时，直接按照人脸检测关键点标注的基础上进行曲线拟合并上色，对于关键点的位置不做调整，导致当光线或人脸角度发生变化时，嘴唇及嘴角的关键点位置不准，与实际位置不符，对上妆效果产生较大影响。

发明内容

鉴于上述问题，提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的人像唇部的自动上妆方法和相应的人像唇部的自动上妆装置，计算设备以及计算机存储介质。

根据本发明的一个方面，提供了一种人像唇部的自动上妆方法，所述方法包括：

从人像面部图像中提取嘴唇关键点，并检测人像面部图像中的人像面部朝向以及嘴唇形态，根据人像面部朝向以及嘴唇形态，调整所述嘴唇关键点的位置；

检测所述人像面部图像中的人脸区域的皮肤色调和皮肤色号，根据所述皮肤色调和所述皮肤色号，从口红颜色样本库中选择目标口红颜色；

依据所述嘴唇关键点的位置使用所述目标口红颜色进行融合上色。

上述方案中，所述从人像面部图像中提取嘴唇关键点进一步包括：

识别人像面部图像中的面部轮廓及五官，为人像面部图像设置关键点，从全部关键点中提取嘴唇关键点；其中，所述嘴唇关键点用于描述嘴唇图像信息。

上述方案中，在所述根据人像面部朝向以及嘴唇形态，调整所述嘴唇关键点的位置之前，所述方法还包括：

根据嘴唇形态以及所述嘴唇关键点中的嘴角关键点，判断是否对所述嘴唇关键点的位置进行调整。

上述方案中，所述根据嘴唇形态以及所述嘴唇关键点中的嘴角关键点，判断是否对所述嘴唇关键点的位置进行调整进一步包括：

当所述嘴唇形态为未张嘴形态或张嘴程度小于第一预设程度阈值时，所述嘴角关键点不符合第一预设条件，则对所述嘴唇关键点的位置进行调整；其中，所述第一预设条件为在灰度色彩空间中所述嘴角关键点中间的像素点的亮度低于第一预设阈值；

当所述嘴唇形态为张嘴形态且张嘴程度大于第二预设程度阈值时，若所述嘴角关键点不符合第二预设条件，则对所述嘴唇关键点的位置进行调整；其中，所述第一预设程度阈值小于或等于所述第二预设程度阈值；所述第二预设条件为所述嘴角关键点位于嘴唇区域的边缘附近且未同时位于肤色区域或唇色区域中。

上述方案中，所述根据人像面部朝向以及嘴唇形态，调整所述嘴唇关键点的位置进一步包括：