[发明专利]一种第一视角视频动作识别方法及装置在审
| 申请号： | 202210120923.5 | 申请日： | 2022-02-09 |
| 公开（公告）号： | CN114596520A | 公开（公告）日： | 2022-06-07 |
| 发明（设计）人： | 聂梦真;姜金印 | 申请（专利权）人： | 天津大学 |
| 主分类号： | G06V20/40 | 分类号： | G06V20/40;G06K9/62;G06N3/04;G06N3/08;G06V10/80;G06V10/26;G06V10/82 |
| 代理公司： | 天津盛理知识产权代理有限公司 12209 | 代理人： | 陈娟 |
| 地址： | 300071*** | 国省代码： | 天津;12 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明提供了一种第一视角视频动作识别方法和装置，构建第一视角动作识别的多流网络模型，模型包括卷积神经网络CNN、Transformer网络等。模型采用RGB模态及深度模态，分为三个阶段进行动作分类，通过在ImageNet上预训练的卷积神经网络提取视频帧的双尺度特征，根据不同模态、不同尺度特征图各自的特点，分别采取不同的帧内分割方式，结合相关性计算机制增强空间表征，提高空间语义信息，通过多尺度跨模态融合模块的相互作用，产生交叉模态表示，增强模态间的互相关性；基于注意力机制，提取视频帧间的时序信息；融合经过空间交互增强的双模态数据，有效利用并融合双模态的时空信息，可以达到较好的动作识别效果。 | ||
| 搜索关键词： | 一种 第一 视角 视频 动作 识别 方法 装置 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于天津大学，未经天津大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202210120923.5/，转载请声明来源钻瓜专利网。
