[发明专利]一种基于深度学习的人脸漫画生成方法及其装置

摘要

本发明公开开了一种基于深度学习的人脸漫画生成方法及其装置，其中，该方法包括：获取个人图像，标定出77个人脸特征点；进行重新估计及旋转操作，获得含有正面标准姿态人脸的图像；根据其图像构建人脸矩形框；并等比放大三倍、进行裁剪，构建人头图像块；同时，裁剪出人脸矩形框对应图像，进行归一化处理，并依次送入预先训练好的人脸及五官属性多标签分类深度卷积神经预测网络，获得人脸的性别及五官属性标签；根据人脸的性别及五官属性标签、人头图像块及人脸矩形框对应图像，在漫画素材库中选择相应的素材，进行相应形变处理，获得五官、头发及人脸肤底的漫画素材；然后进行拼接处理，最终获得漫画图像。在本发明实施例中，能够实现智能化人脸漫画的绘制，不惜要任何的人工辅助。

主权项

1.一种基于深度学习的人脸漫画生成方法，其特征在于，所述方法包括：获取个人图像，在照片中标定出77个人脸特征点；根据标定的36号左眼眼球特征点和39号右眼眼球特征点对图像中的人脸倾斜角度进行估计处理，通过计算出的倾斜角度对原图像进行旋转操作，使得36号左眼眼球特征点和39号右眼眼球特征点达到水平位置，即获得含有正面标准姿态人脸的图像；获取含有正面标准姿态人脸图像，标定出其图像中77个特征点，从中获取2号、12号、15号和17号四个特征点，构建人脸矩形框；将人脸矩形框按中心不变的方式等比放大三倍，并将其放大后的矩形框圈定的图像区域进行裁剪，构建人头图像块；获取含有正面标准姿态人脸照片中的77个特征点，裁剪出人脸中五官的所在矩形区域，进行归一化处理，并依次送入预先训练好的人脸及五官属性多标签分类深度卷积神经预测网络，获得人脸的性别及五官属性标签；根据人脸的性别及五官属性标签，在漫画素材库中选择相应的五官素材，以输入的对应真实图片为参考，对选定素材进行相应形变处理，获得对应生成的五官漫画素材；对所述人头图像块进行计算、分割处理，获得头发精分割区域，结合所述人脸性别属性，在漫画素材库中选出相应的头发素材，以输入的对应真实图片为参考，对选定的头发漫画素材进行相应形变处理，获得对应生成的头发漫画素材；获取所述人脸矩形框，结合所述人脸性别属性，在相应的漫画素材库中选出人脸肤底素材，进行形变处理，获得对应生成的人脸肤底漫画素材；结合所述的五官漫画素材、头发漫画素材、人脸肤底漫画素材，按照原真实照片中对应所在位置进行拼接处理，最终获得漫画图像。