[发明专利]一种基于哈希学习的跨模态材料表面检索方法及装置有效
| 申请号： | 202110748308.4 | 申请日： | 2021-07-01 |
| 公开（公告）号： | CN113468386B | 公开（公告）日： | 2023-10-20 |
| 发明（设计）人： | 周亮;冶占远;王洪飞;魏昕 | 申请（专利权）人： | 南京邮电大学 |
| 主分类号： | G06F16/903 | 分类号： | G06F16/903 |
| 代理公司： | 南京苏科专利代理有限责任公司 32102 | 代理人： | 范丹丹 |
| 地址： | 210046 *** | 国省代码： | 江苏;32 |
| 权利要求书： | 暂无信息 | 说明书： | 暂无信息 |
| 摘要： | 本发明揭示了一种基于哈希学习的跨模态材料表面检索方法及装置，该方法包括以下步骤：S1：获取训练数据集，每个材料表面样本包括视觉图片和触觉加速度；S2：对训练集进行符号化表示，建立两个并行的深度网络，得到视觉和触觉的特征表示；S3：将得到的不同模态特征表示分别输入自注意力网络，得到不同模态自注意力特征；S4：建立哈希层，将得到的视触自注意力实值特征转化为二进制哈希码，同时建立模态内中心约束并利用跨模态损失函数优化整个网络；S5：建立跨模态材料表面检索装置，实现跨模态检索。采用本方法能够充分融合视觉触觉之间的信息，将视触信息的最终特征表示转化为低维二进制哈希码，减少了跨模态检索的存储及检索成本。 | ||
| 搜索关键词： | 一种 基于 学习 跨模态 材料 表面 检索 方法 装置 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于南京邮电大学，未经南京邮电大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202110748308.4/，转载请声明来源钻瓜专利网。
