[发明专利]一种图像描述方法在审
| 申请号： | 201910688842.3 | 申请日： | 2019-07-29 |
| 公开（公告）号： | CN110390363A | 公开（公告）日： | 2019-10-29 |
| 发明（设计）人： | 吕诗奇;刘晋 | 申请（专利权）人： | 上海海事大学 |
| 主分类号： | G06K9/62 | 分类号： | G06K9/62;G06F17/27 |
| 代理公司： | 上海元好知识产权代理有限公司 31323 | 代理人： | 张妍;张静洁 |
| 地址： | 201306 上海市*** | 国省代码： | 上海;31 |
| 权利要求书： | 暂无信息 | 说明书： | 暂无信息 |
| 摘要： | 一种图像描述方法，利用VGG卷积神经网络来提取图片中的全局图像特征，利用Faster R‑CNN网络来提取图片中的局部图像特征，通过全局‑局部特征融合算法对全局图像特征和局部图像特征进行融合，得到图像融合特征，通过带有注意力机制的双向长短时记忆网络处理图像融合特征，生成初步的图像描述语句，利用局部图像特征提取时得到的图像目标信息与初步的图像描述语句中的名词进行基于WordNet词向量相似度计算，对图像描述语句进行纠正，生成最终的图像描述语句。本发明减少了无用信息的影响，增强了关键信息的体现，增强了模型的容错和泛化能力，增加了描述语句的准确性。 | ||
| 搜索关键词： | 图像描述 语句 局部图像特征 全局图像 卷积神经网络 相似度计算 注意力机制 处理图像 关键信息 记忆网络 局部特征 融合算法 图像目标 图像融合 无用信息 融合 词向量 图片 纠正 全局 网络 | ||
【主权项】：
1.一种图像描述方法，其特征在于，包含以下步骤：利用VGG卷积神经网络来提取图片中的全局图像特征；利用Faster R‑CNN网络来提取图片中的局部图像特征；通过全局‑局部特征融合算法对全局图像特征和局部图像特征进行融合，得到图像融合特征；通过带有注意力机制的双向长短时记忆网络处理图像融合特征，生成初步的图像描述语句；利用局部图像特征提取时得到的图像目标信息与初步的图像描述语句中的名词进行基于WordNet词向量相似度计算，对初步生成的图像描述语句进行纠正，生成最终的图像描述语句。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于上海海事大学，未经上海海事大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201910688842.3/，转载请声明来源钻瓜专利网。
- 上一篇：一种用于检测无人车故障的方法及无人车
- 下一篇：图像分类方法及装置
