[发明专利]图片生成与模型训练方法、装置及存储介质有效
申请号: | 202010111604.9 | 申请日: | 2020-02-24 |
公开(公告)号: | CN111340913B | 公开(公告)日: | 2023-05-26 |
发明(设计)人: | 王波;张骞 | 申请(专利权)人: | 北京奇艺世纪科技有限公司 |
主分类号: | G06T11/60 | 分类号: | G06T11/60;G06N3/08 |
代理公司: | 北京银龙知识产权代理有限公司 11243 | 代理人: | 许静;黄灿 |
地址: | 100080 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 图片 生成 模型 训练 方法 装置 存储 介质 | ||
本发明实施例提供了一种图片生成与模型训练方法、装置及存储介质,其中,上述图片生成方法,包括:获取用户输入的分割图和条件向量;将所述分割图、所述条件向量和预设的随机噪声输入到预先训练得到的目标图片生成模型中,获得目标图片;其中,所述目标图片生成模型包括目标空间自适应归一化模块、目标解码器以及目标生成器。本发明实施例提供的图片生成方法无需使用素材对原始图片中的各个类别的属性特征进行匹配,能够有效提高生成的图片与用户输入内容的相关度,并有助于满足用户对图片生成的个性化需求。
技术领域
本发明涉及图片处理技术领域,特别是涉及一种图片生成与模型训练方法、装置及存储介质。
背景技术
随着图片处理技术的发展,用户可以通过一些图片生成工具来生成个性化的图片,例如卡通化的个人图像、聊天表情等。
现有的图片生成工具以模板匹配的图片生成方式为主,即预先建立类别(例如五官、脸型、头发、眼镜等)的素材库,在进行图片生成时,从用户提供的原始图片中提取各个类别的属性特征,并基于属性特征从相关类别的素材库中选取最匹配的素材进行拼接,最终得到生成图片。模板匹配的图片生成方式的缺陷在于,预先建立的素材通常比较固定,且难以对原始图片中的类别属性特征进行修改,导致生成图片的相关度较差,且难以满足用户对图片生成的个性化需求。
发明内容
本发明实施例的目的在于提供一种图片生成与模型训练方法、装置及存储介质,以提高生成图片的相关度,并便于满足用户对图片生成的个性化需求。
具体技术方案如下:
在本发明实施的第一方面,首先提供了一种图片生成方法,包括:
获取用户输入的分割图和条件向量;
将所述分割图、所述条件向量和预设的随机噪声输入到预先训练得到的目标图片生成模型中,获得目标图片;
其中,所述目标图片生成模型包括目标空间自适应归一化模块、目标解码器以及目标生成器,所述目标解码器的输入端用于接收所述随机噪声与所述条件向量,所述目标空间自适应归一化模块的输入端用于接收所述分割图,所述目标生成器的输入用于接收所述目标空间自适应归一化模块的输出与所述目标解码器的输出。
在本发明实施的第二方面,还提供了一种图片生成模型训练方法,包括:
构建生成对抗网络,所述生成对抗网络包括原始图片生成模型与原始图片判别模型;
获取样本图片、预设的随机噪声以及用户输入的分割图和条件向量;
将所述分割图、所述条件向量和预设的随机噪声输入所述原始图片生成模型中,获得合成图片;其中,所述原始图片生成模型中构建有生成损失函数,且所述原始图片生成模型包括原始空间自适应归一化模块、原始解码器以及原始生成器,所述原始解码器的输入端用于接收所述随机噪声与所述条件向量,所述原始空间自适应归一化模块的输入端用于接收所述分割图,所述原始生成器的输入用于接收所述原始空间自适应归一化模块的输出与原始解码器的输出;
将所述合成图片与所述样本图片输入至所述原始图片判别模型,获得判别结果;
基于所述判别结果对所述原始图片生成模型的网络参数进行调整,直至依据所述判别结果得到的所述生成损失函数的函数值满足损失阈值,获得目标图片生成模型。
在本发明实施的第三方面,还提供了一种图片生成装置,包括:
第一获取模块,用于获取用户输入的分割图和条件向量;
第二获取模块,用于将所述分割图、所述条件向量和预设的随机噪声输入到预先训练得到的目标图片生成模型中,获得目标图片;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇艺世纪科技有限公司,未经北京奇艺世纪科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010111604.9/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种基于APP的居家瘦减肥方法
- 下一篇:光伏逆变器组件