[发明专利]一种基于元学习的自监督域适应方法在审
申请号: | 202110727430.3 | 申请日: | 2021-06-29 |
公开(公告)号: | CN113537307A | 公开(公告)日: | 2021-10-22 |
发明(设计)人: | 路统宇;颜成钢;孙垚棋;张继勇;李宗鹏 | 申请(专利权)人: | 杭州电子科技大学 |
主分类号: | G06K9/62 | 分类号: | G06K9/62;G06K9/46 |
代理公司: | 杭州君度专利代理事务所(特殊普通合伙) 33240 | 代理人: | 朱月芬 |
地址: | 310018 浙*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 学习 监督 适应 方法 | ||
1.一种基于元学习的自监督域适应方法,其特征在于,包括以下步骤:
步骤1,设置训练器和测试器:
将目标域样本的重建过程作为元学习中的训练器,将源域样本的分类过程作为元学习中的测试器;
步骤2,利用目标域样本进行图像重建任务并计算重建损失:
将无标签的目标域样本输入特征提取网络得到目标域样本特征,然后将目标域样本特征输入图像重建网络进行图像重建并计算重建损失;
步骤3,对特征提取网络进行参数更新:
利用训练器中的重建损失对训练器中的特征提取网络进行参数更新,由于权值共享,测试器中的特征提取网络的参数和训练器中的特征提取网络参数一起更新,即使得测试器中网络的参数更新方向趋向训练器中网络的参数更新方向;
步骤4,利用源域样本进行分类任务并计算分类损失:
将有标签的源域数据输入参数更新后的特征提取网络得到源域数据特征,然后将源域数据特征输入分类网络进行图像分类任务并计算分类损失;
步骤5,计算总损失函数并对全部网络进行参数更新:
计算总损失函数,并对训练器和测试器中的特征提取网络、重建网络和分类网络进行参数更新。
2.根据权利要求1所述的一种基于元学习的自监督域适应方法,其特征在于,步骤1具体方法如下:
将目标域样本xt的重建过程作为元学习中的元训练器(Meta-train),将源域样本xs的分类过程作为元学习中的元测试器(Meta-test);其中有标签的源域表示为S={Xs,Ys},xs∈Xs和ys∈Ys分别表示源域样本和相应的标签,无标签的目标域表示为T={Xt},其中xt∈Xt表示目标域样本。
3.根据权利要求2所述的一种基于元学习的自监督域适应方法,其特征在于,步骤2具体方法如下:
将无标签的目标域样本xt输入特征提取网络G得到目标域样本特征ft,然后将目标域样本特征ft输入图像重建网络D进行图像重建得到目标域重建样本并计算重建损失Lr;其中特征提取网络G采用ResNet-50结构,ResNet的基本单元通过跳接将之前层的输出与本层计算的输出相加,并将求和的结果输入到激活函数中作为本层的输出;通过ResNet-50的特征提取过程,得到目标域样本特征ft=G(xt);图像重建网络D采用解码器结构,通过一系列上采样将目标域样本特征ft还原为原图大小,即(ft);重建损失为:
其中Nt为目标域样本个数,j为目标域中第j个样本。
4.根据权利要求3所述的一种基于元学习的自监督域适应方法,其特征在于,步骤3具体方法如下:
利用训练器中的重建损失Lr对特征提取网络G进行参数更新,即:
其中为当前特征提取网络的参数,为经过更新后的特征提取网络的参数,α为学习率,为解码器D的参数,表示对参数求梯度,梯度下降采用随机梯度下降算法;由于权值共享,测试器中的特征提取网络G的参数θ和训练器中的特征提取网络G的参数θ一起更新,即迫使测试器中图像分类等特定任务对网络的参数更新方向趋向训练器中自监督图像重建任务对网络的参数更新方向。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州电子科技大学,未经杭州电子科技大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110727430.3/1.html,转载请声明来源钻瓜专利网。