[发明专利]一种基于对抗生成网络的图像修复方法有效
申请号: | 202010371025.8 | 申请日: | 2020-05-06 |
公开(公告)号: | CN111612708B | 公开(公告)日: | 2023-05-12 |
发明(设计)人: | 陈沅涛;张浩鹏;蔡烁;余飞;陈曦;王震;陶家俊;刘林武;王柳;吴一鸣 | 申请(专利权)人: | 长沙理工大学 |
主分类号: | G06T5/00 | 分类号: | G06T5/00;G06N3/0475;G06N3/094 |
代理公司: | 长沙楚为知识产权代理事务所(普通合伙) 43217 | 代理人: | 李大为 |
地址: | 410114 湖南省*** | 国省代码: | 湖南;43 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 对抗 生成 网络 图像 修复 方法 | ||
1.一种基于对抗生成网络的图像修复方法,其特征在于,包括步骤:
S1、构建图像修复训练网络:将生成SE-ResNet网络添加到生成网络中,将判别SE-ResNet网络添加到判别网络,得到图像修复训练网络;
S2、训练:从训练数据集中提取若干个原始图像,掩码处理得到若干个训练图像,分别使用所述生成网络中的所述生成SE-ResNet网络生成训练修复图像,再使用所述判别网络中的所述判别SE-ResNet网络判别所述训练修复图像的真假,根据所述判别网络的判别结果对所述生成网络的网络参数进行调整,使所述图像修复训练网络达到平衡状态后,以训练好的所述生成网络作为图像修复网络;
S3、修复:将待修复图像输入到所述图像修复网络中,得到修复图像。
2.根据权利要求1所述的基于对抗生成网络的图像修复方法,其特征在于,在所述步骤S2中,所述训练图像为将训练数据集中的图像进行图像掩膜处理后得到,使用若干个图像对所述图像修复训练网络进行若干次训练,最终得到所述图像修复网络。
3.根据权利要求2所述的基于对抗生成网络的图像修复方法,其特征在于,每次训练的步骤具体包括:
S21、将缺陷图像输入到所述生成网络中,使用所述生成SE-ResNet网络进行图像进行特征图像处理,使得生成的特征图像的分辨率降为预定分辨率;
S22、所述生成网络对所述特征图像进行修复处理,得到所述训练修复图像;
S23、所述判别网络使用所述判别SE-ResNet网络对所述训练修复图像进行损失判定,若是符合输出要求,则判定修复成功;否则,判定修复失败,执行步骤S24;
S24、所述判别网络根据损失判定结果调整所述生成网络的网络参数,执行步骤S21。
4.根据权利要求3所述的基于对抗生成网络的图像修复方法,其特征在于,所述损失判定为使用生成损失函数对所述训练修复图像与对应的所述原始图像之间进行损失判定;所述生成损失函数为:
Lfinal=Lcon+λ1Ladv+λ2LCX;
其中,Lfinal为生成损失;Ladv为对抗损失;Lcon为内容损失;LCX为上下文损失;λ1为对抗系数;λ2为上下文系数。
5.根据权利要求4所述的基于对抗生成网络的图像修复方法,其特征在于,所述对抗损失通过对抗损失函数得到,所述对抗损失函数为:
其中,Ladv为对抗损失;D(x)是样本概率;x是真实样本或生成样本;E(*)是分布函数的期望值;z是从某一特定分布pz中得到的采样,(x,y)是从某一特定分布pr中得到的采样;G(*)是对抗性损失函数。
6.根据权利要求4所述的基于对抗生成网络的图像修复方法,其特征在于,所述内容损失通过内容损失函数得到,所述内容损失函数为:
其中,Lcon为内容损失;E(*)是分布函数的期望值;z是从某一特定分布pz中得到的采样,(x,y)是从某一特定分布pr中得到的采样;G(*)是对抗性损失函数;⊙是两个矩阵的对应元素相乘;M是图像掩膜。
7.根据权利要求4所述的基于对抗生成网络的图像修复方法,其特征在于,所述上下文损失通过上下文损失函数得到,所述上下文损失函数为:
其中,LCX为上下文损失;E(*)是分布函数的期望值;z是从某一特定分布pz中得到的采样,(x,y)是从某一特定分布pr中得到的采样;G(*)是对抗性损失函数;CX(*)是计算相似度的函数;Φ是VGG16网络。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于长沙理工大学,未经长沙理工大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010371025.8/1.html,转载请声明来源钻瓜专利网。