[发明专利]一种基于高阶低秩多模态注意力机制的视频描述方法有效
| 申请号： | 201910891869.2 | 申请日： | 2019-09-20 |
| 公开（公告）号： | CN110826397B | 公开（公告）日： | 2022-07-26 |
| 发明（设计）人： | 金涛;李英明;张仲非 | 申请（专利权）人： | 浙江大学 |
| 主分类号： | G06V20/40 | 分类号： | G06V20/40;G06N3/04;G06N3/08 |
| 代理公司： | 杭州宇信知识产权代理事务所(普通合伙) 33231 | 代理人： | 王健 |
| 地址： | 310058 浙江*** | 国省代码： | 浙江;33 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种基于高阶低秩多模态注意力机制的视频描述方法，用于为给定视频片段生成简短准确的描述。具体包括如下步骤：获取用于训练视频描述生成模型的视频数据集，并定义算法目标；对视频数据集中的时序多模态特征建模；基于时序多模态特征在解码器上建立高阶低秩多模态注意力机制；使用所述模型生成输入视频的描述。本发明适用于真实视频场景的视频描述生成，面对各类复杂情况具有较佳的效果和鲁棒性。 | ||
| 搜索关键词： | 一种 基于 高阶低秩多模态 注意力 机制 视频 描述 方法 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于浙江大学，未经浙江大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201910891869.2/，转载请声明来源钻瓜专利网。
