[发明专利]一种基于自监督机制的遥感图像细粒度目标识别方法有效
申请号: | 202111210500.4 | 申请日: | 2021-10-18 |
公开(公告)号: | CN113989662B | 公开(公告)日: | 2023-02-03 |
发明(设计)人: | 陈初杰;瞿崇晓;张永晋;祝中科;张建楠;杜鑫;范长军 | 申请(专利权)人: | 中国电子科技集团公司第五十二研究所 |
主分类号: | G06V20/13 | 分类号: | G06V20/13;G06V10/26;G06V10/80;G06V10/82;G06N3/0464;G06N3/08 |
代理公司: | 杭州君度专利代理事务所(特殊普通合伙) 33240 | 代理人: | 杨天娇 |
地址: | 311100 浙江*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 监督机制 遥感 图像 细粒度 目标 识别 方法 | ||
1.一种基于自监督机制的遥感图像细粒度目标识别方法,其特征在于,所述的基于自监督机制的遥感图像细粒度目标识别方法,包括:
获取高光谱卫星遥感图像并按照预设规则对所述高光谱卫星遥感图像进行切割获得切割后的高光谱卫星遥感图像;
对切割后的高光谱卫星遥感图像进行预处理,而后根据不同的波段获得可见光卫星遥感图像以及对应的红外成像卫星遥感图像,并对所述可见光卫星遥感图像以及对应的红外成像卫星遥感图像进行图像融合以得到融合卫星遥感图像;
将所述融合卫星遥感图像输入目标检测卷积神经网络以获得目标位置;
根据所述目标位置从所述融合卫星遥感图像截取目标图像截图,输入语义分割卷积神经网络以获得所述目标图像截图的语义分割结果;
根据所述语义分割结果对所述目标图像截图进行图像滤波,并将滤波后的图像输入细粒度目标识别网络模型进行目标细粒度识别获得遥感图像目标识别结果。
2.如权利要求1所述的基于自监督机制的遥感图像细粒度目标识别方法,其特征在于,对所述可见光卫星遥感图像以及对应的红外成像卫星遥感图像进行图像融合以得到融合卫星遥感图像,包括:
融合采用如下公式:
Is=λaIa+λbIb
其中,Is为所述融合卫星遥感图像,Ia为所述可见光卫星遥感图像,Ib为所述红外成像卫星遥感图像,“+”表示所述可见光卫星遥感图像和所述红外成像卫星遥感图像相对应位置处的元素相加,λa和λb表示可见光卫星遥感图像和所述红外成像卫星遥感图像的权重。
3.如权利要求2所述的基于自监督机制的遥感图像细粒度目标识别方法,其特征在于,0<λb+0.5<λa<1.0。
4.如权利要求1所述的基于自监督机制的遥感图像细粒度目标识别方法,其特征在于,所述目标检测卷积神经网络采用改进的YOLOv3网络,包括特征提取网络层、特征融合层以及检测输出层,其中:
在特征提取网络层Darknet-53中加入两组HRFB结构以及对应的两组空间注意力结构;
所述HRFB结构包括输入层、卷积层和拼接层,所述卷积层包括三个支路,第一支路包括一个1*1的卷积结构,第二支路包括一个1*1的卷积结构和两个3*3的卷积结构,第三支路包括一个1*1的卷积结构和一个3*3的卷积结构,其中3*3的卷积结构的间隔率均为1;
所述空间注意力结构包括池化核分别为3、5、7的三个最大池化层,所述三个最大池化层的输出经过拼接后在输入到一个卷积层,最后经过激活函数输出空间注意力特征。
5.如权利要求1所述的基于自监督机制的遥感图像细粒度目标识别方法,其特征在于,所述根据所述语义分割结果对所述目标图像截图进行图像滤波,包括:
滤波采用公式:
Fs=Fb·F
其中,Fs为滤波后的图像,Fb为所述语义分割结果的二值化图像,其中有目标的位置像素值为1,其余为背景位置像素值为0;F为所述目标图像截图,“·”表示所述二值化图像和所述目标图像截图相对应位置处的元素相乘。
6.如权利要求1所述的基于自监督机制的遥感图像细粒度目标识别方法,其特征在于,所述细粒度目标识别网络模型包括第一网络结构和第二网络结构,其中:
所述第一网络结构用于预测图像中每个预选区域的信息量,并根据信息量推荐预定数量的图像区域作为特征提取的候选区域,所述信息量用于表征所述预选区域的目标特征显著程度;
所述第二网络结构将第一网络结构获得的候选区域缩放至相同大小并通过卷积网络结构进行特征提取和特征融合以获得图像的联合特征向量,将所述联合特征向量输入支持向量机以获得目标细粒度识别结果。
7.如权利要求6所述的基于自监督机制的遥感图像细粒度目标识别方法,其特征在于,所述使用第一网络结构用于预测图像中每个预选区域的信息量,并根据信息量推荐预定数量的图像区域作为特征提取的候选区域的方法,包括:
根据输入图像,随机产生N个矩形区域{R1,R2,...,RN},其中,所述矩形区域具有m种不同的分辨率和m种不同的长宽比率;
将所述N个矩形区域通过所述第一网络结构进行信息量提取得到信息量列表{I1,I2,...,IN};
对所述信息量列表从大到小进行排序,选取信息量列表前M个信息量对应的矩形区域作为特征提取的候选区域。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国电子科技集团公司第五十二研究所,未经中国电子科技集团公司第五十二研究所许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111210500.4/1.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序