[发明专利]一种基于多模态特征合成的零样本跨模态检索方法有效
申请号: | 202010222893.X | 申请日: | 2020-03-26 |
公开(公告)号: | CN111428071B | 公开(公告)日: | 2022-02-01 |
发明(设计)人: | 徐行;张明;林凯毅;杨阳;邵杰;申恒涛 | 申请(专利权)人: | 电子科技大学 |
主分类号: | G06F16/583 | 分类号: | G06F16/583;G06F16/55;G06F16/38;G06F16/35;G06K9/62;G06N3/04;G06N3/08 |
代理公司: | 成都行之专利代理事务所(普通合伙) 51220 | 代理人: | 温利平 |
地址: | 611731 四川省成*** | 国省代码: | 四川;51 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于多模态特征合成的零样本跨模态检索方法,利用两个对抗生成网络,通过两个模态数据共享的类别嵌入来合成不同模态的特征表示,然后将原始的模态数据和合成的模态数据映射到共同子空间并对齐分布。从而建立同一类别不同模态数据之间的联系并将知识迁移到未见过的类。循环一致性约束进一步减小了原始语义特征和重构语义特征之间的差异,很好地建立了每个模态中原始表示和语义特征之间的关联,使得共同语义空间更具鲁棒性,提高了零样本跨模态检索的准确度。 | ||
搜索关键词: | 一种 基于 多模态 特征 合成 样本 跨模态 检索 方法 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于电子科技大学,未经电子科技大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202010222893.X/,转载请声明来源钻瓜专利网。