[发明专利]一种基于对偶距离损失的生成对抗网络训练方法在审
申请号: | 201911345589.8 | 申请日: | 2019-12-24 |
公开(公告)号: | CN111144563A | 公开(公告)日: | 2020-05-12 |
发明(设计)人: | 宋艳枝;彭程;王昊 | 申请(专利权)人: | 合肥黎曼信息科技有限公司 |
主分类号: | G06N3/08 | 分类号: | G06N3/08;G06N3/04 |
代理公司: | 上海精晟知识产权代理有限公司 31253 | 代理人: | 孙永智 |
地址: | 230000 安徽省合肥市合肥高新技术开发*** | 国省代码: | 安徽;34 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 对偶 距离 损失 生成 对抗 网络 训练 方法 | ||
1.一种基于对偶距离损失的生成对抗网络训练方法,其特征在于,包括如下步骤:
步骤S1:获取目标分布的数据集,并对数据集进行预处理;
步骤S2:设置生成器和判别器神经网络的结构和参数,以及训练过程中的学习率;
步骤S3:根据神经网络的参数计算出对偶距离损失函数,然后基于对这个对偶距离损失函数采用随机梯度下降法,训练生成器,生成真实分布。
2.根据权利要求1所述的一种基于对偶距离损失的生成对抗网络训练方法,其特征在于,所述步骤S3之后,需要计算出目标真实分布和生成分布之间的经验对偶距离:
式中,
其中,xi是真实分布中的样本点,zi是高斯分布中的样本点,m、n为正整数,f为判别器,g为生成器,和分别为判别器和生成器所在的空间。
3.根据权利要求1所述的一种基于对偶距离损失的生成对抗网络训练方法,其特征在于,所述生成对抗网络训练方法对摄动点的计算,然后用摄动点确定对偶距离损失函数以及优化方向,包括如下步骤:
初始化步骤:对目标数据集进行处理。给定初始状态下的判别器f0和生成器g0,设置好参数γ∈(0,2)和以及k=0,给定两个正整数m和n;
数据点的随机选取步骤:在目标数据集中选取m个点,记作{x1,...,xm},在一个指定的高斯噪声中选取n个点,记作{z1,...,zn};
摄动点的计算步骤:对于给定的生成器gk和判别器fk,考虑计算摄动点以及
优化方向计算:考虑函数的子梯度,记作和而后考虑优化方向,分别为
更新步骤:计算以及以及τk=γEk/||dk||2。
4.根据权利要求1所述的一种基于对偶距离损失的生成对抗网络训练方法,其特征在于,所述生成对抗网络训练方法至少以1-3δ的概率满足:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于合肥黎曼信息科技有限公司,未经合肥黎曼信息科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911345589.8/1.html,转载请声明来源钻瓜专利网。