[发明专利]基于改进的核极限学习机和GAN的自适应学习方法在审
申请号: | 201910043961.3 | 申请日: | 2019-01-17 |
公开(公告)号: | CN110414545A | 公开(公告)日: | 2019-11-05 |
发明(设计)人: | 何春梅;康红宇;徐繁华 | 申请(专利权)人: | 湘潭大学 |
主分类号: | G06K9/62 | 分类号: | G06K9/62;G06N3/08 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 411105 湖南省*** | 国省代码: | 湖南;43 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 极限学习机 自适应学习 映射 分类器 目标域 源域 改进 惩罚系数 目标分类 映射距离 复用性 逆矩阵 新环境 源分类 自适应 最小化 求解 标注 分类 应用 优化 网络 学习 | ||
1.基于改进的核极限学习机和GAN的自适应学习方法,其特征在于首先基于改进的核极限学习机利用源域数据预训练一个分类器C,然后根据传统极限学习机得到源域和目标域特征映射,最后结合GAN的自适应学习最小化源域映射和目标域特征映射距离使得源分类模型C可以直接应用于目标映射,从而消除学习单独的目标分类器的需要,至少还包括以下步骤,
步骤一、基于改进的核极限学习机利用源域数据预训练一个分类器C:
1)构建核矩阵ΩELM,
2)用共轭梯度法在方程ΩELMβKELM=T上计算输出权重βKELM;
步骤二、根据传统极限学习机得到源域和目标域特征映射:
1)随机生成输入权值wi和bi,
2)得到源域S极限学习机隐含层映射H(Xs),
3)得到目标域T极限学习机隐含层映射H(XT);
步骤三、结合GAN的自适应学习最小化源域映射和目标域特征映射距离使得源分类模型C可以直接应用于目标映射,从而消除学习单独的目标分类器的需要:
1)固定源域映射H(Xs),
2)源域映射H(Xs)和目标域数据映射H(XT)与判别器D进行对抗训练,得到最优化的鉴别器D和H(XT),
3)使用训练好的目标域映射和共轭梯度算法的线性KELM对目标域数据进分类。
2.根据权利要求1所述的基于改进的核极限学习机和GAN的自适应学习方法,其特征在于基于改进的核极限学习机利用源域数据预训练一个分类器C,至少还包括以下步骤,
已知源域数据集合XS=[x1,x2…,xn]∈Rn和标签tS
步骤一、构建核矩阵ΩELM:
1)采用线性核函数:
K(u,v)=u·v (1)
2)利用Mercer’s条件构造核矩阵替代HHT:
所以ΩELM=XSXST,其中XS=[x1,x2…,xn];
步骤二、用共轭梯度法在方程ΩELMβKELM=T上计算输出权重βKELM:
共轭梯度法是求解正定系数矩阵线性方程组(式(3))的一种迭代方法,而求解方程组(3)可以看成是求二次函数(式(4))的极小点,可以用共轭梯度法来求;共轭梯度法的基本思想是取当前点的负梯度方向和前面搜索方向进行共轭化,从而产生当前点的搜索方向,
A·x=b (3)
算法描述如下:
第1步 输入数据A、b,置初始值x(0)=0,r(0)=b-Ax(0),d(0)=r(0),精度要求ε和迭代次数k=0,
第2步 计算r(k+1)=r(k)-αkAd(k),
第3步 若‖x(k+1)-x(k)‖<ε或k=n-1,则停止计算(x(k+1)作为方程组的解);否则,计算
d(k+1)=r(k+1)+θk+1d(k)
第4步 置k=k+1,转第2步;
因为共轭梯度法针对的是正定系数矩阵,而本方法采用线性核函数来构建的核矩阵ΩELM=XSXST是实对称矩阵,即为正定系数矩阵,从而输出权值公式改为:
βKELM=(ΩELM)-1T (5)
即:ΩELMβKELM=T(6)
采用共轭梯度法来求解式(6),计算输出权重βKELM。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于湘潭大学,未经湘潭大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910043961.3/1.html,转载请声明来源钻瓜专利网。