[发明专利]长时记忆增强的段落级别图像描述生成方法在审
| 申请号： | 202110609977.3 | 申请日： | 2021-06-01 |
| 公开（公告）号： | CN113591874A | 公开（公告）日： | 2021-11-02 |
| 发明（设计）人： | 丁贵广;陈辉 | 申请（专利权）人： | 清华大学 |
| 主分类号： | G06K9/46 | 分类号： | G06K9/46;G06K9/62;G06N3/04;G06N3/08 |
| 代理公司： | 北京清亦华知识产权代理事务所(普通合伙) 11201 | 代理人： | 王萌 |
| 地址： | 10008*** | 国省代码： | 北京;11 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本申请提出了一种长时记忆增强的段落级别图像描述生成方法，涉及图像描述技术领域，其中，该方法包括：通过预训练的卷积神经网络对待描述图像进行图像特征编码；通过第一循环神经网络对历史信息进行历史信息编码；使用注意力机制从高容量记忆池中检索出与历史信息编码相关的历史记忆信息，将其映射成一个记忆向量得到记忆增强的历史信息编码；通过第二循环神经网络将利用视觉注意力机制获取的图像上下文视觉特征和记忆增强的历史信息编码处理为预测向量，基于预测向量使用softmax层预测下一时刻的词的分布信息，完成自然语言描述生成。本发明充分利用历史的信息，有效加强循环神经网络的长时上下文关系建模能力，提升段落级别的图像描述效果。 | ||
| 搜索关键词： | 记忆 增强 段落 级别 图像 描述 生成 方法 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于清华大学，未经清华大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202110609977.3/，转载请声明来源钻瓜专利网。
