[发明专利]一种图像处理方法有效
申请号: | 201910186966.1 | 申请日: | 2019-03-13 |
公开(公告)号: | CN110008846B | 公开(公告)日: | 2022-08-30 |
发明(设计)人: | 金晨凯;郭国安;吴晨 | 申请(专利权)人: | 南京邮电大学 |
主分类号: | G06V40/16 | 分类号: | G06V40/16;G06V10/82;G06N3/04;G06N3/08 |
代理公司: | 南京纵横知识产权代理有限公司 32224 | 代理人: | 董建林;范青青 |
地址: | 210003 江苏*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 图像 处理 方法 | ||
1.一种图像处理方法,其特征在于,包括如下步骤:
采集包含处理特征的真实图像和不包含处理特征的真实图像,构建训练样本;
将训练样本输入至循环生成式对抗网络中,以预构建的损失函数最小为目标训练所述循环生成式对抗网络,所述损失函数包括全变分正则化损失函数;
采用训练好的循环生成式对抗网络对待处理图像进行处理;
所述循环生成式对抗网络的训练方法包括如下步骤:
采用循环生成式对抗网络的第二判别器计算输入训练样本包含处理特征的概率,获取包含处理特征的真实图像;
采用循环生成式对抗网络的第一生成器生成包含处理特征的真实图像的颜色注意力图和掩码注意力图,再将包含处理特征的真实图像和与其对应的颜色注意力图、掩码注意力图合成,通过循环生成式对抗网络的第一判别器判别获取不包含处理特征的第一合成图像;
采用循环生成式对抗网络的第二生成器生成第一合成图像的颜色注意力图和掩码注意力图,再将第一合成图像和与其对应的颜色注意力图、掩码注意力图合成为包含处理特征的第二合成图像;
采用循环生成式对抗网络的第一判别器计算输入训练样本包含处理特征的概率,获取不包含处理特征的真实图像;
采用循环生成式对抗网络的第二生成器生成不包含处理特征的真实图像的颜色注意力图和掩码注意力图,再将不包含处理特征的真实图像和与其对应的颜色注意力图、掩码注意力图合成,通过循环生成式对抗网络的第二判别器判别获取包含处理特征的第三合成图像;
采用循环生成式对抗网络的第一生成器生成第三合成图像的颜色注意力图和掩码注意力图,再将第三合成图像和与其对应的颜色注意力图、掩码注意力图合成为不包含处理特征的第四合成图像;
根据包含处理特征的真实图像、第二合成图像、不包含处理特征的真实图像和第四合成图像计算损失函数,以所述损失函数最小为目的,调整第二生成器、第一生成器、第二判别器和第一判别器;
所述损失函数如下:
L(G,F,Dx,Dy)=LGAN(F,Dy,X,Y)+LGAN(G,Dx,Y,X)+λLcyc(G,F,X,Y)+βLTV(A)
其中,
式中,G为第一生成器,F为第二生成器,Dx为第一判别器,Dy为第二判别器;
X为不包含处理特征的真实图像训练样本集合,Y为包含处理特征的真实图像训练样本集合,x为不包含处理特征的真实图像,y为包含处理特征的真实图像,x'为y经第一生成器G生成的不包含处理特征的合成图像,y'为x经第一生成器G生成的包含处理特征的合成图像,y”为x'经第二生成器F生成的包含处理特征的合成图像,x”为y'经第二生成器F生成的不包含处理特征的合成图像;
|| ||1为1范数函数;|| ||2为2范数函数;
A为第一生成器G或第二生成器F生成的掩码注意力图,h为掩码注意力图的高度,w为掩码注意力图的宽度;
Ai,j为掩码注意力图的第i行j列的值,Ai+1,j为掩码注意力图的第i+1行j列的值,Ai,j+1为掩码注意力图的第i行j+1列的值,||A||2为掩码注意力图的2范数;
AG(y)为y经过G得到的掩码注意力图,AG(y')为y'经过G得到的掩码注意力图,AF(x)为x经过F得到的掩码注意力图,AF(x')为x'经过F得到的掩码注意力图;
CG(y)为y经过G得到的颜色注意力图,CG(y')为y'经过G得到的颜色注意力图,CF(x)为x经过F得到的颜色注意力图,CF(x')为x'经过F得到的颜色注意力图;
Dy(y)为第二判别器Dy判断输入图像y是否为包含处理特征的真实图像,Dy(y')为第二判别器Dy判断输入图像y'是否为包含处理特征的真实图像,Dx(x)为第一判别器Dx判断输入图像x是否为不包含处理特征的真实图像,Dx(x')为第一判别器Dx判断输入图像x'是否为不包含处理特征的真实图像;
E[]为期望函数,y~Pdata(Y)表示从包含处理特征的真实图像训练样本集合Y中随机选择一个包含处理特征的真实图像y,x~Pdata(X)表示从不包含处理特征的真实图像训练样本集合X中随机选择一个不包含处理特征的真实图像x;
L(G,F,Dx,Dy)为循环生成式对抗网络的损失函数;
LGAN(F,Dy,X,Y)为循环生成式对抗网络中第二生成器F和第二判别器Dy的极大极小化损失函数;
LGAN(G,Dx,Y,X)为循环生成式对抗网络中第一生成器G和第一判别器Dx的极大极小化损失函数;
Lcyc(G,F,X,Y)为循环生成式对抗网络的循环一致损失函数;
LTV(A)为循环生成式对抗网络的全变分差损失函数;
λ、β为超参数,为逐点相乘。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京邮电大学,未经南京邮电大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910186966.1/1.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序