[发明专利]视频描述方法、系统及装置有效
| 申请号： | 201710940199.X | 申请日： | 2017-09-30 |
| 公开（公告）号： | CN110019952B | 公开（公告）日： | 2023-04-18 |
| 发明（设计）人： | 蔡海军;陈院林;王亮;王威 | 申请（专利权）人： | 华为技术有限公司;中国科学院自动化研究所 |
| 主分类号： | G06F16/738 | 分类号： | G06F16/738;G06V20/40;G06V10/774;G06V10/82;G06N3/0464 |
| 代理公司： | 广州三环专利商标代理有限公司 44202 | 代理人： | 郝传鑫;熊永强 |
| 地址： | 518129 广东*** | 国省代码： | 广东;44 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明实施例提供了一种视频描述方法、系统及装置，其中，该方法可以利用基于卷积神经网络的视频编码器提取待描述视频中当前时刻视频帧的视觉特征表示；将当前时刻的视觉特征表示写入到当前时刻的视觉记忆存储器中；根据当前时刻的视觉记忆存储器和当前时刻的文本记忆存储器从当前时刻的属性记忆存储器中读取属性信息；利用基于长短时记忆网络的文本解码器根据上一时刻单词和当前时刻读取的属性信息生成预测的单词。可见，该实施例采用多模态描述方法，有助于增加视频描述的灵活性。 | ||
| 搜索关键词： | 视频 描述 方法 系统 装置 | ||
【主权项】：
1.一种视频描述方法，其特征在于，包括：利用基于卷积神经网络的视频编码器提取待描述视频中当前时刻视频帧的视觉特征表示；将当前时刻的视觉特征表示写入到当前时刻的视觉记忆存储器中；根据当前时刻的视觉记忆存储器和当前时刻的文本记忆存储器从当前时刻的属性记忆存储器中读取属性信息；利用基于长短时记忆网络的文本解码器根据上一时刻单词和当前时刻读取的属性信息生成预测的单词。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于华为技术有限公司;中国科学院自动化研究所，未经华为技术有限公司;中国科学院自动化研究所许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201710940199.X/，转载请声明来源钻瓜专利网。
- 上一篇：一种生成视频缩略图的方法及设备
- 下一篇：一种有效载荷图像数据实时快视系统
