[发明专利]一种图像分割方法、装置、设备和存储介质在审
申请号: | 202210193522.2 | 申请日: | 2022-03-01 |
公开(公告)号: | CN114581462A | 公开(公告)日: | 2022-06-03 |
发明(设计)人: | 曹琼;杨玺;马本腾;陶大程 | 申请(专利权)人: | 京东科技信息技术有限公司 |
主分类号: | G06T7/11 | 分类号: | G06T7/11;G06V10/80 |
代理公司: | 北京品源专利代理有限公司 11332 | 代理人: | 倪焱 |
地址: | 100176 北京市大兴区经济*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 图像 分割 方法 装置 设备 存储 介质 | ||
1.一种图像分割方法,其特征在于,包括:
获取待分割的目标图像;
确定所述目标图像中的局部图像块以及与所述局部图像块尺度相匹配的全局图像块;
将所述局部图像块和所述全局图像块输入至预设分割网络模型中进行图像分割处理,所述预设分割网络模型用于:对输入的所述局部图像块和所述全局图像块进行特征融合,并基于融合后的目标特征信息进行分割处理;
根据所述预设分割网络模型的输出,确定所述目标图像对应的分割结果。
2.根据权利要求1所述的方法,其特征在于,所述确定所述目标图像中的局部图像块以及与所述局部图像块尺度相匹配的全局图像块,包括:
对所述目标图像进行裁剪,确定参考图像块;
对所述参考图像块进行再次裁剪,确定局部图像块;
对所述参考图像块进行下采样,确定与所述局部图像块尺度相匹配的全局图像块。
3.根据权利要求1所述的方法,其特征在于,所述预设分割网络模型包括:局部特征编码子模型、全局特征编码子模型、特征融合子模型和特征解码子模型;
所述将所述局部图像块和所述全局图像块输入至预设分割网络模型中进行图像分割处理,包括:
将所述局部图像块输入至所述局部特征编码子模型中,提取所述局部图像块对应的局部特征信息;
将所述全局图像块输入至所述全局特征编码子模型中,提取所述全局图像块对应的全局特征信息;
将所述局部特征信息和所述全局特征信息输入至所述特征融合子模型中,基于自注意力机制,对所述局部特征信息和所述全局特征信息进行特征融合,确定融合后的目标特征信息;
将所述目标特征信息输入至所述特征解码子模型中进行特征解码,确定所述局部图像块对应的分割结果。
4.根据权利要求3所述的方法,其特征在于,所述局部特征编码子模型包括:预设数量的局部特征编码层;
所述将所述局部图像块输入至所述局部特征编码子模型中,提取所述局部图像块对应的局部特征信息,包括:
将所述局部图像块输入至所述局部特征编码子模型中的第一个局部特征编码层中进行特征编码操作,并将所述第一个局部特征编码层输出的局部特征信息输入至下一局部特征编码层中;
将最后一个局部特征编码层输出的局部特征信息作为所述局部图像块对应的局部特征信息。
5.根据权利要求3所述的方法,其特征在于,所述特征融合子模型包括:特征拼接模块和自注意力模块;
所述将所述局部特征信息和所述全局特征信息输入至所述特征融合子模型中,基于自注意力机制,对所述局部特征信息和所述全局特征信息进行特征融合,确定融合后的目标特征信息,包括:
将所述局部特征信息和所述全局特征信息输入至所述特征拼接模块中,将所述局部特征信息和所述全局特征信息进行维度展开和拼接处理,确定拼接特征信息;
将所述拼接特征信息输入至所述自注意力模块中进行注意力处理,确定目标特征信息。
6.根据权利要求5所述的方法,其特征在于,所述自注意力模块包括:自注意力层和前馈层;
所述将所述拼接特征信息输入至所述自注意力模块中进行注意力处理,确定目标特征信息,包括:
将所述拼接特征信息输入至所述自注意力层中,对输入的所述拼接特征信息进行映射,确定查询特征向量和键值对特征向量,并基于所述查询特征向量和所述键值对特征向量进行注意力处理,获得注意力处理后的特征信息;
将所述注意力处理后的特征信息输入至所述前馈层中引入非线性信息,确定目标特征信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于京东科技信息技术有限公司,未经京东科技信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210193522.2/1.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序