[发明专利]图像检索方法和装置、计算机设备和存储介质有效

专利信息
申请号: 201710433984.6 申请日: 2017-06-09
公开(公告)号: CN109033107B 公开(公告)日: 2021-09-17
发明(设计)人: 赖韩江 申请(专利权)人: 腾讯科技(深圳)有限公司;中山大学
主分类号: G06F16/583 分类号: G06F16/583;G06K9/62;G06N3/04;G06N3/08
代理公司: 广州华进联合专利商标代理有限公司 44224 代理人: 何平;邓云鹏
地址: 518000 广东省深圳*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 图像 检索 方法 装置 计算机 设备 存储 介质
【权利要求书】:

1.一种图像检索方法,其特征在于,包括:

获取检索图像;

将所述检索图像输入预先对具有相似关系的训练图像样本训练得到的卷积神经网络,通过所述卷积神经网络的输入层和前置卷积层得到第一输出结果;所述前置卷积层为所述卷积神经网络中靠近输入层的预设数量的卷积层;

所述第一输出结果输入到所述卷积神经网络的分支网络,得到每个像素点为物体的概率对应的物体的位置概率图;

所述第一输出结果输入到所述卷积神经网络的中间卷积层,得到所述检索图像的特征图;

对所述特征图与所述位置概率图进行点乘处理得到融合位置信息的特征图,并将所述融合位置信息的特征图输入至所述卷积神经网络的后置卷积层,通过后置卷积层和全连接层,输出所述检索图像的特征向量;所述后置卷积层为卷积神经网络中靠近输出层的预设数量的卷积层;

将所述检索图像的特征向量与数据库的各图像的特征向量进行比较,得到所述检索图像的检索结果。

2.根据权利要求1所述的图像检索方法,其特征在于,在获取检索图像的步骤之前,还包括:

利用具有相似关系的训练图像样本训练得到所述卷积神经网络。

3.根据权利要求2所述的图像检索方法,其特征在于,利用具有相似关系的训练图像样本训练得到所述卷积神经网络的步骤之前,还包括:

获取标记相似关系的第一训练图像样本;

获取未标记相似关系的第二训练图像样本;

根据所述第一训练图像样本和所述第二训练图像样本,基于相似性矩阵的特性对应的目标约束,补全所述第二训练图像样本的各图像间的相似关系,得到包括所述第一训练图像样本和所述第二训练图像样本的所述训练图像样本;所述相似性矩阵为分块对角矩阵;所述目标约束为拉普拉斯约束。

4.根据权利要求1所述的图像检索方法,其特征在于,所述卷积神经网络的分支网络采用循环神经网络;

所述第一输出结果输入到所述卷积神经网络的分支网络,得到每个像素点为物体的概率对应的物体的位置概率图的步骤包括:

所述第一输出结果输入到所述卷积神经网络的分支网络,得到每个像素点为一个物体的概率值;

在得到的所述概率值大于预设值时,将所述概率值迭代输入所述分支网络,得到每个像素点为另一物体的概率值;

当得到的所述概率值小于或等于所述预设值时,停止迭代得到每个像素点为物体的概率对应的物体的位置概率图。

5.根据权利要求4所述的图像检索方法,其特征在于,对所述特征图与所述位置概率图进行点乘处理得到融合位置信息的特征图的步骤包括:

分别将各位置概率图与所述特征图进行点乘处理后相加,得到融合位置信息的特征图。

6.一种图像检索装置,其特征在于,包括:图像获取模块、卷积神经网络模块、检索模块;

所述图像获取模块,用于获取检索图像;

所述卷积神经网络模块,用于将所述检索图像输入预先对具有相似关系的训练图像样本训练得到的卷积神经网络,通过所述卷积神经网络的输入层和前置卷积层得到第一输出结果;所述第一输出结果输入到所述卷积神经网络的分支网络,得到每个像素点为物体的概率对应的物体的位置概率图;所述第一输出结果输入到所述卷积神经网络的中间卷积层,得到所述检索图像的特征图;对所述特征图与所述位置概率图进行点乘处理得到融合位置信息的特征图,并将所述融合位置信息的特征图输入至所述卷积神经网络的后置卷积层,通过后置卷积层和全连接层,输出所述检索图像的特征向量;所述前置卷积层为所述卷积神经网络中靠近输入层的预设数量的卷积层;所述后置卷积层为卷积神经网络中靠近输出层的预设数量的卷积层;

所述检索模块,用于将所述检索图像的特征向量与数据库的各图像的特征向量进行比较,得到所述检索图像的检索结果。

7.根据权利要求6所述的图像检索装置,其特征在于,还包括训练模块,用于利用具有相似关系的训练图像样本训练得到所述卷积神经网络。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司;中山大学,未经腾讯科技(深圳)有限公司;中山大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201710433984.6/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top