[发明专利]图像处理方法、装置、电子设备和计算机存储介质有效
申请号: | 201910124385.5 | 申请日: | 2019-02-18 |
公开(公告)号: | CN109829506B | 公开(公告)日: | 2021-03-23 |
发明(设计)人: | 金鑫;魏秀参;赵博睿;谢烟平 | 申请(专利权)人: | 南京旷云科技有限公司;徐州旷视数据科技有限公司;北京旷视科技有限公司 |
主分类号: | G06K9/62 | 分类号: | G06K9/62 |
代理公司: | 北京超凡志成知识产权代理事务所(普通合伙) 11371 | 代理人: | 安卫静 |
地址: | 210000 江苏省南京市*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 图像 处理 方法 装置 电子设备 计算机 存储 介质 | ||
1.一种图像处理方法,其特征在于,包括:
获取待处理图像,并对所述待处理图像进行特征提取,得到特征图;
通过权重计算网络确定用于表示所述特征图的全局图像特征和局部图像特征的中间描述子,并基于所述中间描述子确定通道权重向量;所述全局图像特征用于表示所述特征图的整体特征,所述局部图像特征用于表示所述特征图的局部特征,所述通道权重向量用于表示各个特征通道的重要程度;
利用所述通道权重向量对所述特征图进行通道加权处理,得到通道加权的特征图,以根据所述通道加权的特征图进行图像分析;
其中,所述权重计算网络包括:池化层、全连接层和非线性激活层,其中,所述全连接层分别与所述池化层和所述非线性激活层相连接;
其中,所述池化层为空间金字塔池化层,或,预设平均池化层;
当所述池化层为空间金字塔池化层时,通过权重计算网络确定用于表示所述特征图的全局图像特征和局部图像特征的中间描述子包括:利用所述权重计算网络中的空间金字塔池化层对所述特征图进行空间金字塔池化处理,得到多种尺度的特征图;所述多种尺度的特征图中包含所述全局图像特征和所述局部图像特征;将所述多种尺度的特征图进行拼接处理,得到所述特征图的中间描述子;
当所述池化层为预设平均池化层时,通过权重计算网络确定用于表示所述特征图的全局图像特征和局部图像特征的中间描述子还包括:通过所述权重计算网络中的预设平均池化层对所述特征图进行池化处理,得到池化后的特征图;所述池化后的特征图中包含所述局部图像特征;对所述池化后的特征图进行重塑处理,得到所述特征图的中间描述子。
2.根据权利要求1所述的方法,其特征在于,当所述池化层为空间金字塔池化层时,将所述多种尺度的特征图进行拼接处理,得到所述特征图的中间描述子包括:
对每种尺度的特征图进行重塑处理,得到多种重塑处理后的特征图;
将所述多种重塑处理后的特征图进行连接处理,得到所述特征图的中间描述子。
3.根据权利要求1所述的方法,其特征在于,当所述池化层为预设平均池化层时,所述预设平均池化层的窗口大小为k×k,步长为k的平均池化层,其中,k为所述待处理图像被降采样多次后得到的分辨率最小的特征图的边长。
4.根据权利要求1所述的方法,其特征在于,所述全连接层包括:第一预设全连接层;
基于所述中间描述子确定通道权重向量包括:
通过所述权重计算网络中的第一预设全连接层对所述中间描述子进行信息融合,得到第一通道描述子;所述第一通道描述子表示各个特征通道的特征信息;
通过所述权重计算网络中的非线性激活层对所述第一通道描述子进行非线性激活处理,得到所述通道权重向量。
5.一种图像处理装置,其特征在于,包括:
特征提取单元,用于获取待处理图像,并对所述待处理图像进行特征提取,得到特征图;
确定单元,用于通过权重计算网络确定用于表示所述特征图的全局图像特征和局部图像特征的中间描述子,并基于所述中间描述子确定通道权重向量;所述全局图像特征用于表示所述特征图的整体特征,所述局部图像特征用于表示所述特征图的局部特征,所述通道权重向量用于表示各个特征通道的重要程度;
通道加权处理单元,用于利用所述通道权重向量对所述特征图进行通道加权处理,得到通道加权的特征图,以根据所述通道加权的特征图进行图像分析;
其中,权重计算网络包括:池化层、全连接层和非线性激活层,其中,全连接层分别与池化层和非线性激活层相连接;
所述池化层为空间金字塔池化层,或,预设平均池化层;
当所述池化层为空间金字塔池化层时,确定单元还用于:利用权重计算网络中的空间金字塔池化层对特征图进行空间金字塔池化处理,得到多种尺度的特征图;多种尺度的特征图中包含全局图像特征和局部图像特征;将多种尺度的特征图进行拼接处理,得到特征图的中间描述子;
当所述池化层为预设平均池化层时,确定单元还用于:通过权重计算网络中的预设平均池化层对特征图进行池化处理,得到池化后的特征图;池化后的特征图中包含局部图像特征;对池化后的特征图进行重塑处理,得到特征图的中间描述子。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京旷云科技有限公司;徐州旷视数据科技有限公司;北京旷视科技有限公司,未经南京旷云科技有限公司;徐州旷视数据科技有限公司;北京旷视科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910124385.5/1.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序