[发明专利]一种图像处理方法有效

专利信息
申请号: 201910186966.1 申请日: 2019-03-13
公开(公告)号: CN110008846B 公开(公告)日: 2022-08-30
发明(设计)人: 金晨凯;郭国安;吴晨 申请(专利权)人: 南京邮电大学
主分类号: G06V40/16 分类号: G06V40/16;G06V10/82;G06N3/04;G06N3/08
代理公司: 南京纵横知识产权代理有限公司 32224 代理人: 董建林;范青青
地址: 210003 江苏*** 国省代码: 江苏;32
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 图像 处理 方法
【权利要求书】:

1.一种图像处理方法,其特征在于,包括如下步骤:

采集包含处理特征的真实图像和不包含处理特征的真实图像,构建训练样本;

将训练样本输入至循环生成式对抗网络中,以预构建的损失函数最小为目标训练所述循环生成式对抗网络,所述损失函数包括全变分正则化损失函数;

采用训练好的循环生成式对抗网络对待处理图像进行处理;

所述循环生成式对抗网络的训练方法包括如下步骤:

采用循环生成式对抗网络的第二判别器计算输入训练样本包含处理特征的概率,获取包含处理特征的真实图像;

采用循环生成式对抗网络的第一生成器生成包含处理特征的真实图像的颜色注意力图和掩码注意力图,再将包含处理特征的真实图像和与其对应的颜色注意力图、掩码注意力图合成,通过循环生成式对抗网络的第一判别器判别获取不包含处理特征的第一合成图像;

采用循环生成式对抗网络的第二生成器生成第一合成图像的颜色注意力图和掩码注意力图,再将第一合成图像和与其对应的颜色注意力图、掩码注意力图合成为包含处理特征的第二合成图像;

采用循环生成式对抗网络的第一判别器计算输入训练样本包含处理特征的概率,获取不包含处理特征的真实图像;

采用循环生成式对抗网络的第二生成器生成不包含处理特征的真实图像的颜色注意力图和掩码注意力图,再将不包含处理特征的真实图像和与其对应的颜色注意力图、掩码注意力图合成,通过循环生成式对抗网络的第二判别器判别获取包含处理特征的第三合成图像;

采用循环生成式对抗网络的第一生成器生成第三合成图像的颜色注意力图和掩码注意力图,再将第三合成图像和与其对应的颜色注意力图、掩码注意力图合成为不包含处理特征的第四合成图像;

根据包含处理特征的真实图像、第二合成图像、不包含处理特征的真实图像和第四合成图像计算损失函数,以所述损失函数最小为目的,调整第二生成器、第一生成器、第二判别器和第一判别器;

所述损失函数如下:

L(G,F,Dx,Dy)=LGAN(F,Dy,X,Y)+LGAN(G,Dx,Y,X)+λLcyc(G,F,X,Y)+βLTV(A)

其中,

式中,G为第一生成器,F为第二生成器,Dx为第一判别器,Dy为第二判别器;

X为不包含处理特征的真实图像训练样本集合,Y为包含处理特征的真实图像训练样本集合,x为不包含处理特征的真实图像,y为包含处理特征的真实图像,x'为y经第一生成器G生成的不包含处理特征的合成图像,y'为x经第一生成器G生成的包含处理特征的合成图像,y”为x'经第二生成器F生成的包含处理特征的合成图像,x”为y'经第二生成器F生成的不包含处理特征的合成图像;

|| ||1为1范数函数;|| ||2为2范数函数;

A为第一生成器G或第二生成器F生成的掩码注意力图,h为掩码注意力图的高度,w为掩码注意力图的宽度;

Ai,j为掩码注意力图的第i行j列的值,Ai+1,j为掩码注意力图的第i+1行j列的值,Ai,j+1为掩码注意力图的第i行j+1列的值,||A||2为掩码注意力图的2范数;

AG(y)为y经过G得到的掩码注意力图,AG(y')为y'经过G得到的掩码注意力图,AF(x)为x经过F得到的掩码注意力图,AF(x')为x'经过F得到的掩码注意力图;

CG(y)为y经过G得到的颜色注意力图,CG(y')为y'经过G得到的颜色注意力图,CF(x)为x经过F得到的颜色注意力图,CF(x')为x'经过F得到的颜色注意力图;

Dy(y)为第二判别器Dy判断输入图像y是否为包含处理特征的真实图像,Dy(y')为第二判别器Dy判断输入图像y'是否为包含处理特征的真实图像,Dx(x)为第一判别器Dx判断输入图像x是否为不包含处理特征的真实图像,Dx(x')为第一判别器Dx判断输入图像x'是否为不包含处理特征的真实图像;

E[]为期望函数,y~Pdata(Y)表示从包含处理特征的真实图像训练样本集合Y中随机选择一个包含处理特征的真实图像y,x~Pdata(X)表示从不包含处理特征的真实图像训练样本集合X中随机选择一个不包含处理特征的真实图像x;

L(G,F,Dx,Dy)为循环生成式对抗网络的损失函数;

LGAN(F,Dy,X,Y)为循环生成式对抗网络中第二生成器F和第二判别器Dy的极大极小化损失函数;

LGAN(G,Dx,Y,X)为循环生成式对抗网络中第一生成器G和第一判别器Dx的极大极小化损失函数;

Lcyc(G,F,X,Y)为循环生成式对抗网络的循环一致损失函数;

LTV(A)为循环生成式对抗网络的全变分差损失函数;

λ、β为超参数,为逐点相乘。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京邮电大学,未经南京邮电大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201910186966.1/1.html,转载请声明来源钻瓜专利网。

同类专利
专利分类
×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top