[发明专利]图像风格迁移方法、装置、设备及存储介质在审
申请号: | 202111639182.3 | 申请日: | 2021-12-28 |
公开(公告)号: | CN114266943A | 公开(公告)日: | 2022-04-01 |
发明(设计)人: | 左力文;夏叶锋;靳倩倩 | 申请(专利权)人: | 中移(杭州)信息技术有限公司;中国移动通信集团有限公司 |
主分类号: | G06V10/774 | 分类号: | G06V10/774;G06V10/776;G06K9/62;G06T3/00 |
代理公司: | 深圳市世纪恒程知识产权代理事务所 44287 | 代理人: | 许青华 |
地址: | 311100 浙江省杭州市余*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 图像 风格 迁移 方法 装置 设备 存储 介质 | ||
1.一种图像风格迁移方法,其特征在于,所述图像风格迁移方法包括:
获取目标风格程度调整参数,以及历史图像集;
将所述目标风格程度调整参数和所述历史图像集输入至预设网络模型,得到参考网络模型;
基于目标损失函数对所述参考网络模型进行训练,得到目标风格迁移模型;
在完成训练的推断阶段,将待风格化图像和所述目标风格程度调整参数输入至所述目标风格迁移模型,得到所述目标风格迁移模型输出的目标风格图像。
2.如权利要求1所述的图像风格迁移方法,其特征在于,所述获取目标风格程度调整参数,包括:
从预设范围中进行随机采样,得到风格因子;
通过非线性映射将所述风格因子进行映射,得到目标风格程度调整参数。
3.如权利要求1所述的图像风格迁移方法,其特征在于,所述将所述目标风格程度调整参数和所述历史图像集输入至预设网络模型,得到参考网络模型,包括:
从所述历史图像集中筛选出不符合预设条件的历史图像;
对所述不符合预设条件的历史图像进行预处理,得到处理后的历史图像;
将所述处理后的历史图像和所述目标风格程度调整参数输入至预设网络模型,得到参考网络模型。
4.如权利要求3所述的图像风格迁移方法,其特征在于,所述处理后的历史图像包括处理后的历史内容图像和处理后的历史风格图像;
所述将所述处理后的历史图像和所述目标风格程度调整参数输入至预设网络模型,得到参考网络模型,包括:
将所述处理后的历史内容图像输入至预设网络模型对应的生成器;
通过所述生成器根据所述目标风格程度调整参数和处理后的历史内容图像生成参考风格图像;
根据所述参考风格图像和所述处理后的历史风格图像对所述预设网络模型进行训练,得到参考网络模型。
5.如权利要求4所述的图像风格迁移方法,其特征在于,所述基于目标损失函数对所述参考网络模型进行训练,得到目标风格迁移模型,包括:
将所述参考风格图像和所述处理后的历史风格图像输入至所述参考网络模型对应的判别器中进行比较;
根据比较结果和目标损失函数对所述生成器和所述判别器进行训练,以使所述生成器和所述判别器达到平衡;
在所述生成器和所述判别器达到平衡时,将对应的参考网络模型作为目标风格迁移模型。
6.如权利要求1所述的图像风格迁移方法,其特征在于,所述基于目标损失函数对所述参考网络模型进行训练,得到目标风格迁移模型之前,还包括:
获取所述参考网络模型对应的各个损失模块的权重参数;
根据所述权重参数、所述目标风格程度调整参数和历史图像集构建对抗损失函数、内容损失函数、风格化内容损失函数以及风格因子损失函数;
根据所述抗损失函数、所述内容损失函数、所述风格化内容损失函数以及所述风格因子损失函数确定目标损失函数。
7.如权利要求1至6中任一项所述的图像风格迁移方法,其特征在于,所述在完成训练的推断阶段,将待风格化图像和所述目标风格程度调整参数输入至所述目标风格迁移模型,得到所述目标风格迁移模型输出的目标风格图像之后,还包括:
获取用户根据所述目标风格图像反馈的满意度;
在所述满意度未达到预设满意度时,对所述目标风格程度调整参数进行调整;
基于调整后的目标风格程度调整参数得到新的目标风格图像。
8.一种图像风格迁移装置,其特征在于,所述图像风格迁移装置包括:
获取模块,用于获取目标风格程度调整参数,以及历史图像集;
训练模块,用于将所述目标风格程度调整参数和所述历史图像集输入至预设网络模型,得到参考网络模型;
所述训练模块,还用于基于目标损失函数对所述参考网络模型进行训练,得到目标风格迁移模型;
处理模块,用于在完成训练的推断阶段,将待风格化图像和所述目标风格程度调整参数输入至所述目标风格迁移模型,得到所述目标风格迁移模型输出的目标风格图像。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中移(杭州)信息技术有限公司;中国移动通信集团有限公司,未经中移(杭州)信息技术有限公司;中国移动通信集团有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111639182.3/1.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序