[发明专利]一种跨模态检索方法及系统有效
申请号: | 201811008853.4 | 申请日: | 2018-08-31 |
公开(公告)号: | CN109189968B | 公开(公告)日: | 2020-07-03 |
发明(设计)人: | 曹文明;林秋斌 | 申请(专利权)人: | 深圳大学 |
主分类号: | G06F16/53 | 分类号: | G06F16/53;G06F16/58;G06F16/33;G06K9/62 |
代理公司: | 深圳市恒申知识产权事务所(普通合伙) 44312 | 代理人: | 袁文英 |
地址: | 518060 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明适用于检索技术领域,提供了跨模态检索方法,包括采用堆叠式受限玻尔兹曼机和多模态深度置信网络提取图像和文本各自的模态友好型特征和模态相互型特征,模态友好型特征能够使所获得的特征之间的统计特性方面与输入的更相似,模态相互型特征能够得到在原始输入实例中丢失的相互信息,将两种特征进行融合得到混合特征,通过多个双模态自动编码获得最后的共享特征。本发明实施例利用堆叠式的受限玻尔兹曼机提取各个模态的内部特征,采用深度置信网络挖掘模态之间丢失的相互信息,将两种特征进行融合,构造出适合进行跨模态检索的混合特征,利用多层双模态的自动编码网络挖掘跨模态的复杂信息,有效提高了跨模态检索任务的准确性和检索的速度。 | ||
搜索关键词: | 一种 跨模态 检索 方法 系统 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳大学,未经深圳大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201811008853.4/,转载请声明来源钻瓜专利网。