[发明专利]风格图像生成方法、模型训练方法、装置和设备在审

专利信息
申请号: 202110172021.1 申请日: 2021-02-08
公开(公告)号: CN112991150A 公开(公告)日: 2021-06-18
发明(设计)人: 李文越;尹淳骥;胡兴鸿;周财进;李云颢 申请(专利权)人: 北京字跳网络技术有限公司
主分类号: G06T3/00 分类号: G06T3/00
代理公司: 北京开阳星知识产权代理有限公司 11710 代理人: 祝乐芳
地址: 100190 北京市*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 风格 图像 生成 方法 模型 训练 装置 设备
【权利要求书】:

1.一种风格图像生成方法,其特征在于,包括:

获取原始人脸图像;

利用预先训练的风格图像生成模型,得到与所述原始人脸图像对应的目标风格图像;

其中,所述风格图像生成模型基于分别与第一属性对应的第一原始人脸样本图像和第一风格人脸样本图像、以及分别与第二属性对应的第二原始人脸样本图像和第二风格人脸样本图像训练得到;

所述第一风格人脸样本图像基于第一人脸图像生成模型针对所述第一原始人脸样本图像的第一输出图像得到,所述第一人脸图像生成模型基于分别与所述第一属性对应的第三原始人脸样本图像和标准风格人脸样本图像训练得到;

所述第二风格人脸样本图像基于第二人脸图像生成模型针对所述第二原始人脸样本图像的第二输出图像得到,所述第二人脸图像生成模型基于分别与所述第二属性对应的第四原始人脸样本图像和标准风格人脸样本图像训练得到;

所述第一属性或者所述第二属性用于区分样本图像上人脸的特征。

2.根据权利要求1所述的方法,其特征在于:

所述第一风格人脸样本图像是通过对所述第一输出图像上的人脸进行脸部特征处理得到;

所述第二风格人脸样本图像是通过对所述第二输出图像上的人脸进行所述脸部特征处理得到。

3.根据权利要求2所述的方法,其特征在于,所述脸部特征处理包括嘴部调整;

其中,所述第一风格人脸样本图像是利用与所述第一输出图像上人脸的嘴部状态匹配的第一候选嘴部素材,对所述第一输出图像上人脸的嘴部进行替换得到;

所述第二风格人脸样本图像是利用与所述第二输出图像上人脸的嘴部状态匹配的第二候选嘴部素材,对所述第二输出图像上人脸的嘴部进行替换得到。

4.根据权利要求3所述的方法,其特征在于:

所述第一风格人脸样本图像是基于预先确定的嘴部位置,将第一目标嘴部素材叠加在第一残缺图像上得到;

其中,所述第一残缺图像是将预先确定的第一皮肤素材覆盖所述第一输出图像上的嘴部得到;所述第一目标嘴部素材是通过对所述第一候选嘴部素材上的口腔区域进行非刚性形变处理,以及对所述第一候选嘴部素材上的嘴唇区域进行刚性形变处理得到;

所述第二风格人脸样本图像是基于预先确定的嘴部位置,将第二目标嘴部素材叠加在第二残缺图像上得到;

其中,所述第二残缺图像是将预先确定的第二皮肤素材覆盖所述第二输出图像上的嘴部得到;所述第二目标嘴部素材是通过对所述第二候选嘴部素材上的口腔区域进行所述非刚性形变处理,以及对所述第二候选嘴部素材上的嘴唇区域进行所述刚性形变处理得到。

5.根据权利要求4所述的方法,其特征在于;

所述第一目标嘴部素材是通过对位于所述第一候选嘴部素材上口腔区域的网格进行所述非刚性形变处理,以及对位于所述第一候选嘴部素材上嘴唇区域的网格进行所述刚性形变处理得到;

所述第二目标嘴部素材是通过对位于所述第二候选嘴部素材上口腔区域的网格进行所述非刚性形变处理,以及对位于所述第二候选嘴部素材上嘴唇区域的网格进行所述刚性形变处理得到。

6.根据权利要求2所述的方法,其特征在于,所述脸部特征处理包括脸型调整;

其中,所述第一风格人脸样本图像是基于与所述第一属性对应的目标脸型,对所述第一输出图像上的人脸进行所述脸型调整得到;

所述第二风格人脸样本图像是基于与所述第二属性对应的目标脸型,对所述第二输出图像上的人脸进行所述脸型调整得到。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京字跳网络技术有限公司,未经北京字跳网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202110172021.1/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top