[发明专利]基于自优化机制的全卷积视频描述生成方法有效
| 申请号： | 201910047321.X | 申请日： | 2019-01-18 |
| 公开（公告）号： | CN111464881B | 公开（公告）日： | 2021-08-13 |
| 发明（设计）人： | 张玥杰;房琨城;周练;张涛 | 申请（专利权）人： | 复旦大学 |
| 主分类号： | H04N21/84 | 分类号： | H04N21/84;H04N21/44;G06N3/04 |
| 代理公司： | 上海元好知识产权代理有限公司 31323 | 代理人： | 王淼;张妍 |
| 地址： | 200433 *** | 国省代码： | 上海;31 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明具体为面向视频的跨模态视频描述生成方法。本发明包括三个主要算法部分，即视频内容理解、显著视觉信息获取、自然语言描述生成。本发明使用新型卷积神经网络为基本模型对视频数据集生产自然语言描述，而未使用传统的循环神经网络，并根据堆叠结构的特性设计全新的注意力机制，计算当前词汇与视觉表示的相关度，同时获取每个时刻最关键的视觉信息。和传统视频描述生成方法相比，本方法所关注的视觉信息更为精确，生成的自然语言描述更加准确且符合日常表达方式。这对考虑视频与文本之间的多模态信息而进行视频理解和表达具有重要意义，能够提高模型对视觉信息的理解能力，增强用户体验，在跨媒体信息理解领域具有广泛应用价值。 | ||
| 搜索关键词： | 基于 优化 机制 卷积 视频 描述 生成 方法 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于复旦大学，未经复旦大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201910047321.X/，转载请声明来源钻瓜专利网。
