[发明专利]跨模态的立体视觉对象检索方法及装置在审
申请号: | 202210145571.9 | 申请日: | 2022-02-17 |
公开(公告)号: | CN114547364A | 公开(公告)日: | 2022-05-27 |
发明(设计)人: | 高跃;戴岳;赵曦滨 | 申请(专利权)人: | 清华大学 |
主分类号: | G06F16/583 | 分类号: | G06F16/583;G06V10/40;G06V10/764;G06V10/80;G06K9/62 |
代理公司: | 北京清亦华知识产权代理事务所(普通合伙) 11201 | 代理人: | 黄德海 |
地址: | 10008*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本申请公开了一种跨模态的立体视觉对象检索方法及装置,其中,方法包括:提取各个模态的深度特征,得到实例;构建模态域内动态图结构,使用动态图卷积编码实例特征和实例域内关系,得到实例域内增强特征;构建跨模态动态二分图结构,使用动态二分图卷积编码实例特征和实例跨域关系,得到实例跨域增强特征;对实例特征进行变换编码,得到实例自变换特征;融合上述特征,生成实例融合表示,进而生成类别预测分数,并使用梯度下降算法优化权重,进而使用实例融合表示间的余弦距离计算相似分数得到实例对象的相关跨模态检索数据。由此,解决了相关技术在模态间无法直接检索,跨模态检索精度、速度受限等问题。 | ||
搜索关键词: | 跨模态 立体 视觉 对象 检索 方法 装置 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于清华大学,未经清华大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202210145571.9/,转载请声明来源钻瓜专利网。