[发明专利]一种基于条件生成对抗网络的图像修复方法及系统在审
申请号: | 201910731811.1 | 申请日: | 2019-08-08 |
公开(公告)号: | CN110599411A | 公开(公告)日: | 2019-12-20 |
发明(设计)人: | 金星;夏伟 | 申请(专利权)人: | 中国地质大学(武汉) |
主分类号: | G06T5/00 | 分类号: | G06T5/00;G06N3/08 |
代理公司: | 42238 武汉知产时代知识产权代理有限公司 | 代理人: | 万文广 |
地址: | 430000 湖*** | 国省代码: | 湖北;42 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 图像 损失函数 语境 感知 对抗 基于条件 图像修复 伪造 修复 修补 反向传播 潜在空间 区域修复 矢量输入 图像内容 图像缺失 图像输入 图像映射 网络训练 训练条件 网络 数据集 算法 映射 崩溃 视觉 保证 输出 | ||
1.一种基于条件生成对抗网络的图像修复方法,其特征在于:包括以下步骤:
S101:获取训练数据集,并对所述训练数据集中的数据进行预处理,得到预处理后的训练数据集;
S102:将所述预处理后的训练数据集作为CGAN网络的训练数据集,以对所述CGAN网络进行训练,得到训练好的CGAN网络;
S103:将待修复图像输入至所述训练好的CGAN网络,得到修复后的图像。
2.如权利要求1所述的一种基于条件生成对抗网络的图像修复方法,其特征在于:步骤S101中,所述训练数据集采用CelebA数据集;通过Openface平台对所述训练数据集中的数据进行预处理,包括:首先采用人脸检测算法检测所述训练数据集中的各图像中的人脸区域,然后将检测出来的人脸区域统一裁剪为64×64大小且对齐,得到预处理后的训练数据集。
3.如权利要求1所述的一种基于条件生成对抗网络的图像修复方法,其特征在于:步骤S102中,所述CGAN网络包括生成器G和判别器D,生成器G和判别器D的层数相同,且生成器G的卷积核为判别器D的卷积核的转置;采用预训练好的GAN网络实现CGAN网络的迁移学习,在训练过程中、将GAN模型的目标函数更改为CGAN的目标函数,将GAN中的全连接层更改为卷积层以及进行网络的微调,最后根据loss函数值是否趋于稳定确定是否收敛以结束训练,若loss函数值趋于稳定,则收敛,结束训练,得到训练好的CGAN网络。
4.如权利要求1所述的一种基于条件生成对抗网络的图像修复方法,其特征在于:步骤S103中,将待修复图像输入至所述训练好的CGAN网络,得到修复后的图像,具体包括:
将待修复图像经过编码后输入至生成器G和判别器D,生成器G通过输入随机噪声向量生成修复图像,判别器D判断所述待修复图像与所述修复图像的真假概率;通过不断迭代优化,最终使得判别器D判别不出生成器G生成的修复图像的真假,即达到纳什均衡,输出最终的修复图像,从而实现图像修复。
5.一种基于条件生成对抗网络的图像修复系统,其特征在于:包括以下模块:
训练数据获取模块,用于获取训练数据集,并对所述训练数据集中的数据进行预处理,得到预处理后的训练数据集;
网络训练模块,用于将所述预处理后的训练数据集作为CGAN网络的训练数据集,以对所述CGAN网络进行训练,得到训练好的CGAN网络;
图像修复模块,用于将待修复图像输入至所述训练好的CGAN网络,得到修复后的图像。
6.如权利要求5所述的一种基于条件生成对抗网络的图像修复系统,其特征在于:训练数据获取模块中,所述训练数据集采用CelebA数据集;通过Openface平台对所述训练数据集中的数据进行预处理,包括:首先采用人脸检测算法检测所述训练数据集中的各图像中的人脸区域,然后将检测出来的人脸区域统一裁剪为64×64大小且对齐,得到预处理后的训练数据集。
7.如权利要求5所述的一种基于条件生成对抗网络的图像修复系统,其特征在于:网络训练模块中,所述CGAN网络包括生成器G和判别器D,生成器G和判别器D的层数相同,且生成器G的卷积核为判别器D的卷积核的转置;采用预训练好的GAN网络实现CGAN网络的迁移学习,在训练过程中、将GAN模型的目标函数更改为CGAN的目标函数,将GAN中的全连接层更改为卷积层以及进行网络的微调,最后根据loss函数值是否趋于稳定确定是否收敛以结束训练,若loss函数值趋于稳定,则收敛,结束训练,得到训练好的CGAN网络。
8.如权利要求5所述的一种基于条件生成对抗网络的图像修复系统,其特征在于:图像修复模块中,将待修复图像输入至所述训练好的CGAN网络,得到修复后的图像,具体包括:
将待修复图像经过编码后输入至生成器G和判别器D,生成器G通过输入随机噪声向量生成修复图像,判别器D判断所述待修复图像与所述修复图像的真假概率;通过不断迭代优化,最终使得判别器D判别不出生成器G生成的修复图像的真假,即达到纳什均衡,输出最终的修复图像,从而实现图像修复。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国地质大学(武汉),未经中国地质大学(武汉)许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910731811.1/1.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序