[发明专利]基于核分块注意力机制的马拉松场景人群运动追踪方法在审
申请号: | 202211294812.2 | 申请日: | 2022-10-21 |
公开(公告)号: | CN115565136A | 公开(公告)日: | 2023-01-03 |
发明(设计)人: | 黎俊良;张世雄;魏文应;陶键源;张伟民;肖铁军 | 申请(专利权)人: | 广东博华超高清创新中心有限公司;深圳龙岗智能视听研究院 |
主分类号: | G06V20/52 | 分类号: | G06V20/52;G06V20/70;G06V20/40;G06N3/04;G06V10/42;G06V10/44;G06V10/80;G06V10/82 |
代理公司: | 北京京万通知识产权代理有限公司 11440 | 代理人: | 万学堂;王跃交 |
地址: | 518116 广东省深圳市龙岗区*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 分块 注意力 机制 马拉松 场景 人群 运动 追踪 方法 | ||
1.一种基于核分块注意力机制的马拉松场景人群运动追踪方法,其特征在于,包括以下步骤:
S1.基本模型搭建,所述基本模型包含特征模板、高斯混合模型和运动趋势预测算法三个部分;
S2.建立核分块注意力机制模块;
S3.使用所述核分块注意力机制模块改进基本模型。
2.根据权利要求1所述的基于核分块注意力机制的马拉松场景人群运动追踪方法,其特征在于,在步骤S1中,选取一个高效的密集人群运动追踪算法作为基本模型,所述基本模型包含用于提取特征的特征模板、高斯混合模型和运动趋势预测算法三个部分。
3.根据权利要求1所述的基于核分块注意力机制的马拉松场景人群运动追踪方法,其特征在于,在步骤S2中,所述核分块注意力机制模块从视频特征图中提取不同的局部信息特征,并把所述局部信息特征与全局信息特征相融合,从而提取包含不同语义信息的高质量特征图。
4.根据权利要求1所述的基于核分块注意力机制的马拉松场景人群运动追踪方法,其特征在于,在步骤S2中,在所述核分块注意力机制模块中,作为对比向量的卷积核会通过卷积操作的形式完成注意力特征提取,通过对卷积核进行分块处理,使得分块后的卷积核包含局部特征并分别与视频帧对应的特征图进行注意力机制运算,从而更有效地提取更多局部特征信息。
5.根据权利要求1所述的基于核分块注意力机制的马拉松场景人群运动追踪方法,其特征在于,在步骤S2中,所述特征模板会对被输入视频帧进行特征提取操作,生成特征图F1,所述特征图F1会被输入至所述核分块注意力机制模块中获取更多局部信息。
6.根据权利要求1所述的基于核分块注意力机制的马拉松场景人群运动追踪方法,其特征在于,在步骤S2中,在所述核分块注意力机制模块中,从所述特征图F1中截取的特定区域特征R1会被作为卷积核,R1会被平均分成一个小区域块,分别为r1、r2、r3、r4,这些小区域块会在不同注意力操作分支中分别和F1进行卷积操作,从而提取不同的局部特征;在注意力操作分支A、注意力操作分支B、注意力操作分支C和注意力操作分支D中,所述特征图F1分别与小区域块r1、r2、r3、r4进行卷积操作,其卷积计算结果均被进行归一化处理,从而分别生成特征图F2、F3、F4、F5;随后,特征图F2、F3、F4、F5会进行特征融合,其实现公式如下:
F6=F2+F3+F4+F5
其中,F6是对F2、F3、F4、F5进行特征融合后的特征图,随后,对特征图F6与特征图F1进行特征融合操作,其实现公式如下:
F7=F1*α1+F6*β1
其中,F7是对F1与F6进行特征融合后的特征图,α1与β1表示加权平均运算公式中的系数且α1+β1=1,随后,使用特征图F1进一步对特征图F7进行优化,实现公式如下:
F8=F1*α2+F7*β2
其中,F8是使用F1对F6进行特征优化后的特征图,α2与β2表示加权平均运算公式中的系数且α2+β2=1;
最后,特征图F8会被输入所述高斯混合模型进而检测每个参赛者的位置。
7.根据权利要求1所述的基于核分块注意力机制的马拉松场景人群运动追踪方法,其特征在于,在步骤S3中,所述核分块注意力机制模块加入到所述基本模型的特征提取算法中,从而在特征提取阶段能提取包含不同语义信息的特征。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广东博华超高清创新中心有限公司;深圳龙岗智能视听研究院,未经广东博华超高清创新中心有限公司;深圳龙岗智能视听研究院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211294812.2/1.html,转载请声明来源钻瓜专利网。