[发明专利]面向转播视频的冰壶球运动状态检测方法、系统、计算机设备和存储介质在审
申请号: | 202211150368.7 | 申请日: | 2022-09-21 |
公开(公告)号: | CN115512262A | 公开(公告)日: | 2022-12-23 |
发明(设计)人: | 姜宇;李丹丹 | 申请(专利权)人: | 哈工大郑州研究院 |
主分类号: | G06V20/40 | 分类号: | G06V20/40;G06V10/82;G06V10/774;G06V10/26;G06N3/08;G06N3/04 |
代理公司: | 哈尔滨市阳光惠远知识产权代理有限公司 23211 | 代理人: | 张宏威 |
地址: | 450008 河南省郑州*** | 国省代码: | 河南;41 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 面向 转播 视频 冰壶球 运动 状态 检测 方法 系统 计算机 设备 存储 介质 | ||
1.一种面向转播视频的冰壶球运动状态检测方法,其特征在于,所述方法包括:
步骤1、对转播视频中的冰壶赛道进行语义分割,基于冰壶赛道的尺寸先验信息,计算得出转播视频坐标系与冰壶赛道坐标系之间的坐标转换矩阵,将所述转播视频从斜视视角转换到俯视视角;
步骤2、建立冰壶球目标检测网络,具体包括:
采集冰壶球转播视频,利用步骤1的方法对所述冰壶球转播视频进行转换,通过数据增强方法建立冰壶球目标检测训练数据集;基于所述冰壶球目标检测训练数据集,并利用YOLOX网络建立冰壶球目标检测网络,所述冰壶球目标检测网络的输出为冰壶球检测框;
步骤3、建立冰壶球把柄角度检测模型,具体包括:
基于步骤2中所述冰壶球目标检测网络输出的冰壶球检测框,构建冰壶球检测框数据集;基于所述冰壶球检测框数据集,并利用DeepLabV3+语义分割网络和霍夫变换直线拟合的方法,建立冰壶球把柄角度检测模型,所述冰壶球把柄角度检测模型的输出为冰壶球把柄角度;
步骤4、获取待检测冰壶比赛转播视频,利用步骤1的方法对所述待检测冰壶比赛转播视频进行转换;
利用转换后的待检测冰壶比赛转播视频和所述冰壶球目标检测网络获取待检测冰壶球检测框,根据所述冰壶球检测框获取待检测冰壶球的位置和速度;
步骤5、根据所述待检测冰壶球检测框,并利用所述冰壶球把柄角度检测模型,获取待检测冰壶球把柄角度,根据所述待检测冰壶球把柄角度获取待检测冰壶球的旋转角速度。
2.根据权利要求1所述的一种面向转播视频的冰壶球运动状态检测方法,其特征在于,步骤1具体包括:
步骤1.1、将转播视频中的冰壶赛道进行语义分割图像标注,所述语义分割图像标注包括8类,具体包括:空白赛道、前卫线、蓝环大本营、白环大本营、红环大本营、白圆大本营、记分牌和徽标;
步骤1.2、基于DeepLabV3+语义分割网络分割冰壶赛道,具体为:将转播视频进行空洞卷积和空洞空间金字塔池化,设置的初始学习率,使用指数变换的衰减策略动态调整训练过程中的学习率,并设置目标函数为交点损失函数,基于步骤1.1中的8类图像标注得到转播视频的冰壶赛道图像语义分割结果;
步骤1.3、基于步骤1.2获取的语义分割结果,从转播视频中分割出空白赛道、蓝环大本营、白环大本营,获取空白赛道左边界线和空白赛道右边界线的解析式,以及蓝色圆环的内外轮廓对应椭圆的解析式;
步骤1.4、利用所述空白赛道左边界线和空白赛道右边界线的解析式和所述蓝色圆环的内外轮廓对应椭圆的解析式,并基于冰壶赛道尺寸先验信息计算转播视频坐标系与冰壶赛道坐标系之间的坐标变换矩阵,将所述转播视频从斜视视角变换到俯视视角。
3.根据权利要求2所述的一种面向转播视频的冰壶球运动状态检测方法,其特征在于,
所述损失函数F具体为
其中,y是真实样本,y′是模型给出的预测类别概率,γ为损失因子,α为平衡因子。
4.根据权利要求2或3中的任一项所述的一种面向转播视频的冰壶球运动状态检测方法,其特征在于,步骤1.3,具体包括:
步骤1.3.1、将空白赛道、蓝环大本营、白环大本营对应的像素位置设为1,其他位置为0,分别得到掩膜图像;
步骤1.3.2、如果掩膜图像中一个像素点的8连通域或4连通域内有0像素存在,那么这个像素点就是边界点,得到掩膜图像每一个连通区域的多个轮廓点集,再计算每个轮廓点集对应的面积,选择其中面积最大的那条轮廓作为边缘轮廓;
步骤1.3.3、轮廓线上的每个点在冰壶赛道坐标系下的坐标为(xi,yi),将xi作为自变量、yi作为输出进行低通滤波处理,以yi的原始值和滤波值的差的绝对值作为差值,删除差值超过预设个数的像素的点;
步骤1.3.4、根据滤波之后的轮廓点集,采用最小二乘方法来对轮廓点集进行拟合,得到空白赛道左边界线和空白赛道右边界线的解析式,以及蓝色圆环的内外轮廓对应椭圆的解析式。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于哈工大郑州研究院,未经哈工大郑州研究院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211150368.7/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种滤芯除尘装置
- 下一篇:一种联合问答的图像自然语言描述方法