[发明专利]一种基于条件生成对抗网络的图像修复方法及系统在审

专利信息
申请号: 201910731811.1 申请日: 2019-08-08
公开(公告)号: CN110599411A 公开(公告)日: 2019-12-20
发明(设计)人: 金星;夏伟 申请(专利权)人: 中国地质大学(武汉)
主分类号: G06T5/00 分类号: G06T5/00;G06N3/08
代理公司: 42238 武汉知产时代知识产权代理有限公司 代理人: 万文广
地址: 430000 湖*** 国省代码: 湖北;42
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 图像 损失函数 语境 感知 对抗 基于条件 图像修复 伪造 修复 修补 反向传播 潜在空间 区域修复 矢量输入 图像内容 图像缺失 图像输入 图像映射 网络训练 训练条件 网络 数据集 算法 映射 崩溃 视觉 保证 输出
【权利要求书】:

1.一种基于条件生成对抗网络的图像修复方法,其特征在于:包括以下步骤:

S101:获取训练数据集,并对所述训练数据集中的数据进行预处理,得到预处理后的训练数据集;

S102:将所述预处理后的训练数据集作为CGAN网络的训练数据集,以对所述CGAN网络进行训练,得到训练好的CGAN网络;

S103:将待修复图像输入至所述训练好的CGAN网络,得到修复后的图像。

2.如权利要求1所述的一种基于条件生成对抗网络的图像修复方法,其特征在于:步骤S101中,所述训练数据集采用CelebA数据集;通过Openface平台对所述训练数据集中的数据进行预处理,包括:首先采用人脸检测算法检测所述训练数据集中的各图像中的人脸区域,然后将检测出来的人脸区域统一裁剪为64×64大小且对齐,得到预处理后的训练数据集。

3.如权利要求1所述的一种基于条件生成对抗网络的图像修复方法,其特征在于:步骤S102中,所述CGAN网络包括生成器G和判别器D,生成器G和判别器D的层数相同,且生成器G的卷积核为判别器D的卷积核的转置;采用预训练好的GAN网络实现CGAN网络的迁移学习,在训练过程中、将GAN模型的目标函数更改为CGAN的目标函数,将GAN中的全连接层更改为卷积层以及进行网络的微调,最后根据loss函数值是否趋于稳定确定是否收敛以结束训练,若loss函数值趋于稳定,则收敛,结束训练,得到训练好的CGAN网络。

4.如权利要求1所述的一种基于条件生成对抗网络的图像修复方法,其特征在于:步骤S103中,将待修复图像输入至所述训练好的CGAN网络,得到修复后的图像,具体包括:

将待修复图像经过编码后输入至生成器G和判别器D,生成器G通过输入随机噪声向量生成修复图像,判别器D判断所述待修复图像与所述修复图像的真假概率;通过不断迭代优化,最终使得判别器D判别不出生成器G生成的修复图像的真假,即达到纳什均衡,输出最终的修复图像,从而实现图像修复。

5.一种基于条件生成对抗网络的图像修复系统,其特征在于:包括以下模块:

训练数据获取模块,用于获取训练数据集,并对所述训练数据集中的数据进行预处理,得到预处理后的训练数据集;

网络训练模块,用于将所述预处理后的训练数据集作为CGAN网络的训练数据集,以对所述CGAN网络进行训练,得到训练好的CGAN网络;

图像修复模块,用于将待修复图像输入至所述训练好的CGAN网络,得到修复后的图像。

6.如权利要求5所述的一种基于条件生成对抗网络的图像修复系统,其特征在于:训练数据获取模块中,所述训练数据集采用CelebA数据集;通过Openface平台对所述训练数据集中的数据进行预处理,包括:首先采用人脸检测算法检测所述训练数据集中的各图像中的人脸区域,然后将检测出来的人脸区域统一裁剪为64×64大小且对齐,得到预处理后的训练数据集。

7.如权利要求5所述的一种基于条件生成对抗网络的图像修复系统,其特征在于:网络训练模块中,所述CGAN网络包括生成器G和判别器D,生成器G和判别器D的层数相同,且生成器G的卷积核为判别器D的卷积核的转置;采用预训练好的GAN网络实现CGAN网络的迁移学习,在训练过程中、将GAN模型的目标函数更改为CGAN的目标函数,将GAN中的全连接层更改为卷积层以及进行网络的微调,最后根据loss函数值是否趋于稳定确定是否收敛以结束训练,若loss函数值趋于稳定,则收敛,结束训练,得到训练好的CGAN网络。

8.如权利要求5所述的一种基于条件生成对抗网络的图像修复系统,其特征在于:图像修复模块中,将待修复图像输入至所述训练好的CGAN网络,得到修复后的图像,具体包括:

将待修复图像经过编码后输入至生成器G和判别器D,生成器G通过输入随机噪声向量生成修复图像,判别器D判断所述待修复图像与所述修复图像的真假概率;通过不断迭代优化,最终使得判别器D判别不出生成器G生成的修复图像的真假,即达到纳什均衡,输出最终的修复图像,从而实现图像修复。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国地质大学(武汉),未经中国地质大学(武汉)许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201910731811.1/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top