[发明专利]一种基于深度学习的图像配准方法及装置有效
申请号: | 201811082071.5 | 申请日: | 2018-09-17 |
公开(公告)号: | CN109345575B | 公开(公告)日: | 2021-01-19 |
发明(设计)人: | 王书强;王翔宇;王鸿飞 | 申请(专利权)人: | 中国科学院深圳先进技术研究院 |
主分类号: | G06T7/33 | 分类号: | G06T7/33 |
代理公司: | 深圳市科进知识产权代理事务所(普通合伙) 44316 | 代理人: | 曹卫良 |
地址: | 518055 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 深度 学习 图像 方法 装置 | ||
1.一种基于深度学习的图像配准方法,其特征在于,所述方法包括:
将基准图像和待配准图像作为双通道输入并通过卷积运算提取局部特征;
构建胶囊层并将所述局部特征中的低维信息输入所述胶囊层得到具有空间位置信息的高维特征向量;
通过所述高维特征向量对配准后的基准图像和待配准图像使用全连接层进行预测重构以使得待配准图像和基准图像的相似度达到最优得到融合图像,将所述融合图像作为配准后图像输出;
所述通过所述高维特征向量对配准后的基准图像和待配准图像使用全连接层进行预测重构以使得待配准图像和基准图像的相似度达到最优得到融合图像,将所述融合图像作为配准后图像输出,包括:
构建融合图像网络,并优化目标函数,通过高级胶囊层提取到的高维全局特征向量,对配准后的基准图像和待配准图像进行预测与重构,计算配准融合图像与基准图像的梯度互信息作为损失函数,将特征提取网络和配准融合网络参数统一训练,迭代更新转换矩阵参数和胶囊层间的耦合系数,配准图像与基准图像相似度达到最优时迭代结束,获得最终融合图像作为配准后图像输出。
2.根据权利要求1所述的基于深度学习的图像配准方法,其特征在于,所述将基准图像和待配准图像作为双通道输入并通过卷积运算提取局部特征,包括:
将基准图像和待配准图像两张图像,以双通道形式输入;
通过若干卷积层对待配准图像以及基准图像进行低维信息提取。
3.根据权利要求1所述的基于深度学习的图像配准方法,其特征在于,所述构建胶囊层并将所述局部特征中的低维信息输入所述胶囊层得到具有空间位置信息的高维特征向量,包括:
通过构建胶囊层,将所述低维信息作为输入,输入到所述胶囊层,
将待配准图像与基准图像的局部特征的向量集合作为每一个胶囊层的输入输出,通过动态路由算法将底层胶囊单元的特征输出组合为上层特征,逐级组合待配准图像与基准图像关键特征向量,从高级胶囊层提取到具有空间位置信息的高维特征向量。
4.根据权利要求3所述的基于深度学习的图像配准方法,其特征在于,所述通过动态路由算法将底层胶囊单元的特征输出组合为上层特征,逐级组合待配准图像与基准图像关键特征向量,包括:
上层配准图像特征提取获得的向量ui输入到本层中,在本层中,前层的输出ui与可优化的转换矩阵Wij相乘得出的预测向量其中:
预测向量之间通过线性组合获得向量加权和Sj,其线性组合的系数大小由cij决定,表示为:
在获得Sj之后,通过压缩函数将Sj向量长度限定,获得输出向量vj,其计算公式为:
该非线性函数前一部分是输入向量Sj的缩放尺度,后一部分是输入向量的单位向量Sj,对于通过线性组合方式计算Sj的过程中,系数cij为常量,cij的计算公式为:
其中bij为常量,bij的数值通过上次迭代bij的值和与vj的乘积计算得出,对于bij的更新方式为:
常量cij由bij计算决定,在迭代运算中,bij与两个输出向量的位置与类型相关。
5.根据权利要求1所述的基于深度学习的图像配准方法,其特征在于,所述损失函数表示为:
Loss=NI(A,B)=G(A,B)·I(A,B);
其中:
其中I(A,B)表示了配准图像与基准图像的互信息,G(A,B)反映了配准前后高频信息和梯度方向的变化。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学院深圳先进技术研究院,未经中国科学院深圳先进技术研究院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811082071.5/1.html,转载请声明来源钻瓜专利网。
- 上一篇:基于语义点云配准的激光雷达三维建图方法
- 下一篇:车辆行驶速度鉴定方法及系统
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序