[发明专利]人脸简笔画生成方法及装置有效
申请号: | 202010016526.4 | 申请日: | 2020-01-08 |
公开(公告)号: | CN111223164B | 公开(公告)日: | 2023-10-24 |
发明(设计)人: | 高飞;朱静洁;李鹏;俞泽远;王韬 | 申请(专利权)人: | 杭州未名信科科技有限公司;浙江省北大信息技术高等研究院 |
主分类号: | G06T11/00 | 分类号: | G06T11/00;G06V40/16;G06V10/80 |
代理公司: | 北京辰权知识产权代理有限公司 11619 | 代理人: | 付婧 |
地址: | 311200 浙江省杭州市萧*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 简笔画 生成 方法 装置 | ||
本发明公开了一种人脸简笔画生成方法及装置,包括:从图像中裁剪出人脸图像并预测属性类别;将人脸图像输入通用人脸肖像合成模型,以使通用人脸肖像合成模型合成第一人脸简笔画;确定属性类别需使用的专用人脸肖像合成模型,并将人脸图像输入专用人脸肖像合成模型,以使专用人脸肖像合成模型合成第二人脸简笔画;将第一人脸简笔画和第二人脸简笔画融合。在使用通用人脸肖像合成模型合成第一人脸简笔画的同时,针对不同的人脸属性类别使用不同的专用人脸肖像合成模型合成第二人脸简笔画,以克服人脸属性变化对于肖像简笔画合成质量的影响,进而由第一人脸简笔画和第二人脸简笔画得到的人脸简笔画更加精确,并且满足不同人脸属性的个性化需求。
技术领域
本发明涉及计算机技术领域,具体涉及一种人脸简笔画生成方法及装置。
背景技术
将人脸图像转换为简笔画,在公共安全领域和数字娱乐领域均具有很重要的应用价值。
在传统图像处理方法中,如果要使生成的简笔画效果好,需要图像处理方法的运算复杂度很高,这难以满足实时性的需求,随着机器学习技术的发展,基于机器学习的图像处理技术比传统的图像处理技术运算速度高且精确度也高,因此衍生出很多由人脸图像生成简笔画的机器学习模型。
然而,这些机器学习模型由人脸图像生成的简笔画受人脸属性变化(如人脸纹理特性等属性)的影响较大,生成效果不佳。
发明内容
本发明的目的是针对上述现有技术的不足提出的一种人脸简笔画生成方法及装置,该目的是通过以下技术方案实现的。
本发明的第一方面提出了一种人脸简笔画生成方法,所述方法包括:
从接收到的图像中裁剪出人脸图像,并预测所述人脸图像中人脸的属性类别;
将所述人脸图像输入已训练的通用人脸肖像合成模型,以使所述通用人脸肖像合成模型合成所述人脸图像的第一人脸简笔画;
确定所述属性类别需使用的已训练的专用人脸肖像合成模型,并将所述人脸图像输入所述专用人脸肖像合成模型,以使所述专用人脸肖像合成模型合成所述人脸图像的第二人脸简笔画;
将所述第一人脸简笔画和所述第二人脸简笔画进行融合,得到第三人脸简笔画。
本发明的第二方面提出了一种人脸简笔画生成装置,所述装置包括:
属性预测模块,用于从接收到的图像中裁剪出人脸图像,并预测所述人脸图像中人脸的属性类别;
通用合成模块,用于将所述人脸图像输入已训练的通用人脸肖像合成模型,以使所述通用人脸肖像合成模型合成所述人脸图像的第一人脸简笔画;
专用合成模块,用于确定所述属性类别需使用的已训练的专用人脸肖像合成模型,并将所述人脸图像输入所述专用人脸肖像合成模型,以使所述专用人脸肖像合成模型合成所述人脸图像的第二人脸简笔画;
融合模块,用于将所述第一人脸简笔画和所述第二人脸简笔画进行融合,得到第三人脸简笔画。
在本发明实施例中,在使用通用人脸肖像合成模型合成第一人脸简笔画的同时,针对不同的人脸属性类别使用不同的专用人脸肖像合成模型合成第二人脸简笔画,以克服人脸属性变化对于肖像简笔画合成质量的影响,进而由第一人脸简笔画和第二人脸简笔画融合得到的第三人脸简笔画更加精确,并且满足不同人脸属性的个性化需求。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本发明的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1为本发明根据一示例性实施例示出的一种人脸简笔画生成方法的实施例流程图;
图2为本发明示出的一种人脸不同部位区域的分割示意图;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州未名信科科技有限公司;浙江省北大信息技术高等研究院,未经杭州未名信科科技有限公司;浙江省北大信息技术高等研究院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010016526.4/2.html,转载请声明来源钻瓜专利网。