[发明专利]一种基于重构损失的图像翻译方法有效
申请号: | 202010978853.8 | 申请日: | 2020-09-17 |
公开(公告)号: | CN112541566B | 公开(公告)日: | 2023-07-04 |
发明(设计)人: | 邵明文;张文龙;宋晓霞 | 申请(专利权)人: | 中国石油大学(华东);山东至信信息科技有限公司 |
主分类号: | G06N3/045 | 分类号: | G06N3/045;G06N3/0475;G06N3/0464;G06N3/094 |
代理公司: | 青岛鼎尖知识产权代理有限公司 37318 | 代理人: | 宋涛 |
地址: | 山东省青岛*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 损失 图像 翻译 方法 | ||
1.一种基于重构损失的图像翻译方法,其特征在于,所述基于重构损失的图像翻译方法包括:
采用无监督的方法,使用基于生成式对抗网络的架构的循环一致性网络CycleGAN,利用循环一致性网络CycleGAN判别器提取真实数据的特征;
向采用带跳跃连接的U-net网络结构的生成器提供真实数据特征重建真实数据;
采用LSGAN损失函数,对不同域的图像进行转换,将不成对的两个域的图片相互翻译;
所述基于生成式对抗网络的架构的循环一致性网络CycleGAN包括:
生成器,采用带跳跃连接的U-net网络结构,用于将判别器提供的真实数据特征作为输入,重建真实数据;
判别器,用于提取真实数据的特征,同时区分真实图像与翻译图像,辨别图像真伪;
所述基于重构损失的图像翻译方法包括以下步骤:
步骤一,分别从图像域ΩA、ΩB中获取相应的样本集χA、χB;其中xA∈χA和xB∈χB表示数据样本;
步骤二,利用图像域ΩB的判别器DB提取xB图像的特征fB;
步骤三,将提取得到的图像特征fB作为由ΩA到ΩB的生成器GAB的输入,得到翻译图像GAB(DB(xB));同时将图像xA输入到生成器GAB中得到图像xA的重构图像x′B;
步骤四,利用判别器DB区分图像xB与重构图像x′B;同时将重构图像x′B输入到由ΩB到ΩA的生成器GBA中得到重构图像x″A,实现从图像域ΩA到图像域ΩB的转换;
所述基于重构损失的图像翻译方法还包括:
(1)从ΩA数据分布中随机抽取m个样本:
(2)从ΩB数据分布中随机抽取m个样本:
(3)通过随机梯度下降更新判别器:
(4)通过随机梯度下降更新生成器:
2.如权利要求1所述基于重构损失的图像翻译方法,其特征在于,所述生成器采用带有跳跃连接的“U-Net”网络架构;在每个i层和n-i层之间添加连接,其中n表示层的总数;即每个跳跃连接将第i层的所有通道与第n-i层的所有通道相连接。
3.如权利要求1所述基于重构损失的图像翻译方法,其特征在于,所述循环一致性网络CycleGAN目标函数包括:
对抗性损失、循环一致性损失、重构损失;
对抗性损失:
循环一致性损失:
重构损失:
总目标函数:
其中,λ1、λ2为不同损失相应的权重,用于平衡不同损失对整个损失函数的影响。
4.如权利要求1所述基于重构损失的图像翻译方法,其特征在于,所述LSGAN损失函数为:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国石油大学(华东);山东至信信息科技有限公司,未经中国石油大学(华东);山东至信信息科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010978853.8/1.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序