[发明专利]基于嵌套注意力的原始特征注入网络的视觉问答方法在审
| 申请号： | 202111067912.7 | 申请日： | 2021-09-13 |
| 公开（公告）号： | CN115249307A | 公开（公告）日： | 2022-10-28 |
| 发明（设计）人： | 吴春雷;路静;王雷全;吴杰;庞善臣;韦学艳 | 申请（专利权）人： | 中国石油大学（华东） |
| 主分类号： | G06V10/424 | 分类号： | G06V10/424;G06V10/82;G06N3/04;G06N3/08;G06V10/80;G06F40/30;G06K9/62 |
| 代理公司： | 暂无信息 | 代理人： | 暂无信息 |
| 地址： | 266580 山*** | 国省代码： | 山东;37 |
| 权利要求书： | 暂无信息 | 说明书： | 暂无信息 |
| 摘要： | 本发明公开了基于嵌套注意力的原始特征注入网络的视觉问答方法。以往的方法主要采用注意机制和密集的迭代操作进行细粒度匹配。然而，这些方法无论视觉特征与问题特征是否相关，注意力都会为视觉特征和问题特征输出加权平均值。此外，我们注意到在多次双边共同注意力操作之后，图像的一些有价值但不被关注的边缘信息常常被完全忽视。本发明首次提出了基于嵌套注意力的原始特征注入网络来研究图像和问题之间的对应关系。设计一个具有嵌套注意力强化网络，通过考虑区域间的关系，消除向量不相关信息，有效地融合视觉特征和问题特征。提出原始特征注入模块，恢复图像有价值但不被关注的边缘信息。本发明在VQA2.0上进行大量实验证明了提出模型的有效性。 | ||
| 搜索关键词： | 基于 嵌套 注意力 原始 特征 注入 网络 视觉 问答 方法 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于中国石油大学（华东），未经中国石油大学（华东）许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202111067912.7/，转载请声明来源钻瓜专利网。
