[发明专利]基于卷积神经网络的视频描述方法及装置在审
申请号: | 201811536611.2 | 申请日: | 2018-12-14 |
公开(公告)号: | CN111325068A | 公开(公告)日: | 2020-06-23 |
发明(设计)人: | 潘滢炜;姚霆;梅涛 | 申请(专利权)人: | 北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06F16/78;G06N3/04;G06N3/08 |
代理公司: | 北京同立钧成知识产权代理有限公司 11205 | 代理人: | 荣甜甜;刘芳 |
地址: | 100195 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明实施例提供一种基于卷积神经网络的视频描述方法及装置,针对待描述视频提取出视觉特征序列后,将该视觉特征序列输入至编码器,由编码器对视觉特征序列进行计算,得到待描述视频的各视频帧的状态向量,然后根据各状态向量确定出平均池化结果并输入至解码器,由解码器根据平均池化结果生成与待描述视频相对应的描述结果。该过程中,利用基于卷积神经网络的编码器‑解码器对待描述视频进行描述,以得到符合人类自然语言且不呆板的描述结果,从而提升视频描述结果。基于卷积神经网络的编码器的前向卷积结构使得计算能够并行化,能够对待描述视频的长序列依赖关系进行建模,解码器能够避免递归神经网络容易出现的梯度弥散和爆炸问题。 | ||
搜索关键词: | 基于 卷积 神经网络 视频 描述 方法 装置 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司,未经北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201811536611.2/,转载请声明来源钻瓜专利网。