[发明专利]图像配准方法及相关装置、电子设备、存储介质在审
申请号: | 202110325843.9 | 申请日: | 2021-03-26 |
公开(公告)号: | CN113052882A | 公开(公告)日: | 2021-06-29 |
发明(设计)人: | 黄烨翀;叶宇翔;朱雅靖;陈翼男 | 申请(专利权)人: | 上海商汤智能科技有限公司 |
主分类号: | G06T7/33 | 分类号: | G06T7/33;G06T5/50 |
代理公司: | 深圳市威世博知识产权代理事务所(普通合伙) 44280 | 代理人: | 何倚雯 |
地址: | 200233 上海市徐*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 图像 方法 相关 装置 电子设备 存储 介质 | ||
本申请公开了一种图像配准方法及相关装置、电子设备、存储介质,其中,图像配准方法包括:对第一图像进行编码,得到第一特征图,并对第二图像进行编码,得到第二特征图;融合第一特征图和第二特征图,得到速度场;分别对第一特征图和第二特征图进行解码,得到新的第一特征图和新的第二特征图;利用已得到的速度场,对新的第一特征图和新的第二特征图进行融合,以再次得到速度场;基于多次融合得到的速度场,生成用于配准第一图像和第二图像的配准参数。上述方案,能够提高图像配准精度,具体可以应用于对医学图像进行配准,以提高医学图像的配准精度。
技术领域
本申请涉及图像处理技术领域,特别是涉及一种图像配准方法及相关装置、电子设备、存储介质。
背景技术
图像配准是图像处理研究领域中的重要一环,其目的在于比较或融合针对同一对象在不同条件下获取的图像。目前,图像配准在计算机视觉、医学图像处理、遥感等诸多领域得到了广泛的应用。
然而,现有的图像配准方式配准精度较低,导致其应用效果较差。故此,如何提高图像配准精度成为极具研究价值的课题。
发明内容
本申请提供一种图像配准方法及相关装置、电子设备、存储介质。
本申请第一方面提供了一种图像配准方法,包括:对第一图像进行编码,得到第一特征图,并对第二图像进行编码,得到第二特征图;融合第一特征图和第二特征图,得到速度场;分别对第一特征图和第二特征图进行解码,得到新的第一特征图和新的第二特征图;其中,新的第一特征图的分辨率不同于本次解码前的第一特征图的分辨率,且新的第二特征图的分辨率不同于本次解码前的第二特征图的分辨率;利用已得到的速度场,对新的第一特征图和新的第二特征图进行融合,以再次得到速度场;基于多次融合得到的速度场,生成用于配准第一图像和第二图像的配准参数。
因此,通过对第一图像进行编码,得到第一特征图,并对第二图像进行编码,得到第二特征图,从而融合第一特征图和第二特征图,得到速度场,并分别对第一特征图和第二特征图进行解码,得到新的第一特征图和第二特征图,且新的第一特征图的分辨率不同于本次解码前的第一特征图的分辨率,新的第二特征图的分辨率不同于本次解码前的第二特征图的分辨率,进而利用已得到速度场,对新的第一特征图和新的第二特征图进行融合,以再次得到速度场,并基于多次融合得到的速度场,生成用于配准第一图像和第二图像的配准参数。故此,通过在多个阶段分别融合不同分辨率的特征图,能够得到不同尺度的速度场,从而能够基于不同尺度的速度场,提高配准参数的精度,进而有利于提高配准精度。此外,由于在多个阶段分别得到不同尺度的速度场,从而能够有利于得到用于将第一图像正向地配准至第二图像的配准参数,也能够有利于得到用于将第二图像反向地配准至第一图像的配准参数,进而能够有利于满足微分同胚。
其中,对第一图像进行编码,得到第一特征图,或者,对第二图像进行编码,得到第二特征图,包括:对图像进行特征提取,得到多个通道特征图;基于各个通道特征图在多个通道特征图中的重要程度,得到对应通道特征图的注意力权重;分别利用每一通道特征图的注意力权重对对应通道特征图进行加权处理,得到图像的特征图;其中,在图像为第一图像的情况下,通过上述步骤得到的特征图为第一特征图;或者在图像为第二图像的情况下,通过上述步骤得到的特征图为第二特征图。
因此,通过对图像进行特征提取,得到多个通道特征图,并基于各个通道特征图在多个通道特征图中的重要程度,得到对应通道特征图的注意力权重,从而分别利用每一通道特征图的注意力权重对对应通道特征图进行加权处理,得到图像的特征图。故此,通过各个通道特征图在多个通道特征图中的重要程度而得到的注意力权重,来对对应通道特征图进行加权处理,能够有利于弱化多个通道特征图中表现较强的特征图,或者强化多个通道特征图中表现较弱的特征图,从而能够有利于使不同模态的图像经编码后,得到相近的特征图,进而能够有利于满足多模态图像的配准,拓宽适用范围。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海商汤智能科技有限公司,未经上海商汤智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110325843.9/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种苯并恶唑烷衍生物的合成方法
- 下一篇:一种抗刺激组合物及其制备方法和应用
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序