[发明专利]图像检索方法和装置、计算机设备和存储介质有效
申请号: | 201710433984.6 | 申请日: | 2017-06-09 |
公开(公告)号: | CN109033107B | 公开(公告)日: | 2021-09-17 |
发明(设计)人: | 赖韩江 | 申请(专利权)人: | 腾讯科技(深圳)有限公司;中山大学 |
主分类号: | G06F16/583 | 分类号: | G06F16/583;G06K9/62;G06N3/04;G06N3/08 |
代理公司: | 广州华进联合专利商标代理有限公司 44224 | 代理人: | 何平;邓云鹏 |
地址: | 518000 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 图像 检索 方法 装置 计算机 设备 存储 介质 | ||
1.一种图像检索方法,其特征在于,包括:
获取检索图像;
将所述检索图像输入预先对具有相似关系的训练图像样本训练得到的卷积神经网络,通过所述卷积神经网络的输入层和前置卷积层得到第一输出结果;所述前置卷积层为所述卷积神经网络中靠近输入层的预设数量的卷积层;
所述第一输出结果输入到所述卷积神经网络的分支网络,得到每个像素点为物体的概率对应的物体的位置概率图;
所述第一输出结果输入到所述卷积神经网络的中间卷积层,得到所述检索图像的特征图;
对所述特征图与所述位置概率图进行点乘处理得到融合位置信息的特征图,并将所述融合位置信息的特征图输入至所述卷积神经网络的后置卷积层,通过后置卷积层和全连接层,输出所述检索图像的特征向量;所述后置卷积层为卷积神经网络中靠近输出层的预设数量的卷积层;
将所述检索图像的特征向量与数据库的各图像的特征向量进行比较,得到所述检索图像的检索结果。
2.根据权利要求1所述的图像检索方法,其特征在于,在获取检索图像的步骤之前,还包括:
利用具有相似关系的训练图像样本训练得到所述卷积神经网络。
3.根据权利要求2所述的图像检索方法,其特征在于,利用具有相似关系的训练图像样本训练得到所述卷积神经网络的步骤之前,还包括:
获取标记相似关系的第一训练图像样本;
获取未标记相似关系的第二训练图像样本;
根据所述第一训练图像样本和所述第二训练图像样本,基于相似性矩阵的特性对应的目标约束,补全所述第二训练图像样本的各图像间的相似关系,得到包括所述第一训练图像样本和所述第二训练图像样本的所述训练图像样本;所述相似性矩阵为分块对角矩阵;所述目标约束为拉普拉斯约束。
4.根据权利要求1所述的图像检索方法,其特征在于,所述卷积神经网络的分支网络采用循环神经网络;
所述第一输出结果输入到所述卷积神经网络的分支网络,得到每个像素点为物体的概率对应的物体的位置概率图的步骤包括:
所述第一输出结果输入到所述卷积神经网络的分支网络,得到每个像素点为一个物体的概率值;
在得到的所述概率值大于预设值时,将所述概率值迭代输入所述分支网络,得到每个像素点为另一物体的概率值;
当得到的所述概率值小于或等于所述预设值时,停止迭代得到每个像素点为物体的概率对应的物体的位置概率图。
5.根据权利要求4所述的图像检索方法,其特征在于,对所述特征图与所述位置概率图进行点乘处理得到融合位置信息的特征图的步骤包括:
分别将各位置概率图与所述特征图进行点乘处理后相加,得到融合位置信息的特征图。
6.一种图像检索装置,其特征在于,包括:图像获取模块、卷积神经网络模块、检索模块;
所述图像获取模块,用于获取检索图像;
所述卷积神经网络模块,用于将所述检索图像输入预先对具有相似关系的训练图像样本训练得到的卷积神经网络,通过所述卷积神经网络的输入层和前置卷积层得到第一输出结果;所述第一输出结果输入到所述卷积神经网络的分支网络,得到每个像素点为物体的概率对应的物体的位置概率图;所述第一输出结果输入到所述卷积神经网络的中间卷积层,得到所述检索图像的特征图;对所述特征图与所述位置概率图进行点乘处理得到融合位置信息的特征图,并将所述融合位置信息的特征图输入至所述卷积神经网络的后置卷积层,通过后置卷积层和全连接层,输出所述检索图像的特征向量;所述前置卷积层为所述卷积神经网络中靠近输入层的预设数量的卷积层;所述后置卷积层为卷积神经网络中靠近输出层的预设数量的卷积层;
所述检索模块,用于将所述检索图像的特征向量与数据库的各图像的特征向量进行比较,得到所述检索图像的检索结果。
7.根据权利要求6所述的图像检索装置,其特征在于,还包括训练模块,用于利用具有相似关系的训练图像样本训练得到所述卷积神经网络。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司;中山大学,未经腾讯科技(深圳)有限公司;中山大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710433984.6/1.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序