[发明专利]基于信息传递和注意力机制的图像变化检测方法有效
申请号: | 201811617843.0 | 申请日: | 2018-12-28 |
公开(公告)号: | CN109766936B | 公开(公告)日: | 2021-05-18 |
发明(设计)人: | 刘若辰;张浪浪;焦李成;刘静;慕彩红;张向荣 | 申请(专利权)人: | 西安电子科技大学 |
主分类号: | G06K9/62 | 分类号: | G06K9/62;G06N3/04;G06N3/08;G06T7/00 |
代理公司: | 陕西电子工业专利中心 61205 | 代理人: | 陈宏社;王品华 |
地址: | 710071 陕*** | 国省代码: | 陕西;61 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 信息 传递 注意力 机制 图像 变化 检测 方法 | ||
1.一种基于信息传递和注意力机制的图像变化检测方法,其特征在于包括如下步骤:
(1)读入图像并进行归一化处理:
读入拍摄于同一地点不同时相且经过配准和校正的两幅图像Ix和Iy,并对Ix和Iy分别进行归一化处理,得到归一化图像I1和I2;
(2)获取训练样本集:
分别对归一化图像I1和I2中20%的图像区域进行标注,并在已标注的图像区域上随机剪切多个像素块组成训练样本集;
(3)搭建基于信息传递和注意力机制的深度神经网络:
搭建基于信息传递和注意力机制的深度神经网络,该深度神经网络包括依次层叠的卷积模块→信息传递模块→注意力模块→输出模块,其中:
卷积模块,用于通过两个独立的卷积神经网络CNN对输入的图像块分别进行时相图像特征提取;
信息传递模块,包括依次连接的第一双向长短期记忆网络BiLSTM和第二双向长短期记忆网络BiLSTM,第一BiLSTM用于获取每个时相图像特征的状态表示,第二BiLSTM用于通过每个时相图像特征及其状态表示进行图像语义信息的传递与交互;
注意力模块,用于通过软注意力soft attention结构给每个时相图像特征赋予其对应的注意力权重,以增强图像的变化信息;
输出模块,用于通过依次堆叠的两个全连接层和节点个数为1的输出层获取概率输出值;
(4)设定深度神经网络的训练参数:
设定迭代次数N的初始化值为1,损失函数的最小阈值为Δl,训练的学习率为α;
(5)判断深度神经网络的损失函数LossN是否满足迭代停止条件:
将训练样本集输入到深度神经网络中,得到多个概率输出值,并计算每个概率输出值与输出值对应的真实标签的损失函数的和LossN,然后判断LossN是否小于最小阈值Δl,若是,将LossN对应的深度神经网络作为训练好的深度神经网络,并执行步骤(7),否则执行步骤(6);
(6)对深度神经网络的可训练参数进行更新:
采用梯度下降法对深度神经网络的可训练参数θ进行更新,并令N=N+1,同时将可训练参数为θ的深度神经网络更换为参数为θnew的深度神经网络,执行步骤(5);
(7)利用训练好的深度神经网络输出图像变化检测结果图:
(7a)设定窗口大小为a×a,并以a为步长从左至右从上至下在归一化图像I1和I2上进行滑窗,得到测试样本集,a≥7;
(7b)将测试样本集输入到训练好的深度神经网络中,得到测试样本集的类别向量,并将对该类别向量进行矩阵化的结果作为图像变化检测结果图。
2.根据权利要求1所述的基于信息传递和注意力机制的图像变化检测方法,其特征在于:步骤(1)中所述的对Ix和Iy分别进行归一化处理,归一化公式为:
其中,Ix和Iy表示拍摄于同一地点不同时相且经过配准和校正的两幅图像,I1表示Ix的归一化图像,I2表示Iy的归一化图像。
3.根据权利要求1所述的基于信息传递和注意力机制的图像变化检测方法,其特征在于:步骤(5)中所述的计算深度神经网络的损失函数LossN,计算公式为:
其中,i表示第i个概率输出值,n表示概率输出值的个数。
4.根据权利要求1所述的基于信息传递和注意力机制的图像变化检测方法,其特征在于:步骤(6)中所述的采用梯度下降法对深度神经网络的可训练参数θ进行更新,更新公式为:
其中θnew为更新后的可训练参数,表示对θ进行求导。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于西安电子科技大学,未经西安电子科技大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811617843.0/1.html,转载请声明来源钻瓜专利网。
- 信息记录介质、信息记录方法、信息记录设备、信息再现方法和信息再现设备
- 信息记录装置、信息记录方法、信息记录介质、信息复制装置和信息复制方法
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录设备、信息重放设备、信息记录方法、信息重放方法、以及信息记录介质
- 信息存储介质、信息记录方法、信息重放方法、信息记录设备、以及信息重放设备
- 信息存储介质、信息记录方法、信息回放方法、信息记录设备和信息回放设备
- 信息记录介质、信息记录方法、信息记录装置、信息再现方法和信息再现装置
- 信息终端,信息终端的信息呈现方法和信息呈现程序
- 信息创建、信息发送方法及信息创建、信息发送装置