[发明专利]从广播视频生成运动员跟踪数据的系统及方法在审
申请号: | 202080017536.8 | 申请日: | 2020-02-28 |
公开(公告)号: | CN113508419A | 公开(公告)日: | 2021-10-15 |
发明(设计)人: | 沙龙;S·甘古利;魏新宇;帕特里克·约瑟夫·卢西;阿迪亚·切鲁库穆迪 | 申请(专利权)人: | 斯塔特斯公司 |
主分类号: | G06T7/20 | 分类号: | G06T7/20;G06K9/00;G06N3/04 |
代理公司: | 北京高沃律师事务所 11569 | 代理人: | 杨媛媛 |
地址: | 美国*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 广播 视频 生成 运动员 跟踪 数据 系统 方法 | ||
1.一种生成运动员跟踪预测的方法,包括:
由计算系统检索体育赛事的广播视频馈送,所述广播视频馈送包括多个视频帧;
由所述计算系统将所述广播视频馈送分割成统一视图,其中所述统一视图包括多个可跟踪帧,所述多个可跟踪帧是所述多个视频帧的子集;
由所述计算系统基于所述多个可跟踪帧来生成多个数据集,其中,所述多个数据集包括每个可跟踪帧中每个球员的赛场分割信息、球跟踪信息和身体姿势信息;
由所述计算系统基于所述赛场分割信息和所述身体姿势信息来校准与每个可跟踪帧相关联的相机;
由所述计算系统基于所述多个可跟踪帧和所述身体姿势信息来生成多个短踪片集;
由所述计算系统通过针对所述多个可跟踪帧中的每个运动员生成运动场向量来连接每个短踪片集;以及
由所述计算系统使用神经网络基于所述运动员的运动场向量来预测所述运动员的将来运动。
2.根据权利要求1所述的方法,其中,由所述计算系统将所述广播视频馈送分割成统一视图,包括:
解析所述广播视频馈送以识别与所述体育赛事的相同视图相对应的第一视频帧子集;以及
丢弃与所述体育赛事的不同视图相对应的第二视频帧子集。
3.根据权利要求1所述的方法,其中,由所述计算系统基于多个可跟踪帧来生成多个数据集,包括:
生成所述多个可跟踪帧中每个可跟踪帧中的每个运动员的身体姿势信息。
4.根据权利要求3所述的方法,其中,由所述计算系统基于所述赛场分割信息和所述身体姿势信息来校准与每个可跟踪帧相关联的相机,包括:
通过使用所述身体姿势信息来识别每个帧中的运动员并从每个可跟踪帧中移除每个运动员,识别两个相继可跟踪帧之间的运动模式。
5.根据权利要求1所述的方法,其中,由所述计算系统基于多个可跟踪帧来生成多个数据集,包括:
在所述多个可跟踪帧中的每个可跟踪帧中,使用配置为识别赛场标记的经训练神经网络来识别所述赛场标记。
6.根据权利要求5所述的方法,其中,由所述计算系统基于所述赛场分割信息和所述身体姿势信息来校准与每个可跟踪帧相关联的相机,包括:
检索由所述经训练神经网络生成的赛场标记;以及
将所述赛场标记与赛场标记模板进行比较以生成一个或多个关键帧。
7.根据权利要求1所述的方法,其中,由所述计算系统使用神经网络基于所述运动员的运动场向量来预测所述运动员的将来运动,包括:
使用所述多个可跟踪帧、所述身体姿势信息和经校准的相机来构建整个体育赛事中的运动员运动。
8.一种生成运动员跟踪预测的系统,包括:
处理器;以及
存储器,其上存储有编程指令,所述编程指令当被所述处理器执行时执行一个或多个操作,包括:
检索体育赛事的广播视频馈送,所述广播视频馈送包括多个视频帧;
将所述广播视频馈送分割成统一视图,其中所述统一视图包括多个可跟踪帧,所述多个可跟踪帧是所述多个视频帧的子集;
基于所述多个可跟踪帧来生成多个数据集,其中,所述多个数据集包括每个可跟踪帧中每个球员的赛场分割信息、球跟踪信息和身体姿势信息;
基于所述身体姿势信息来校准与每个可跟踪帧相关联的相机;
基于所述多个可跟踪帧和所述身体姿势信息来生成多个短踪片集;
通过针对所述多个可跟踪帧中的每个运动员生成运动场向量来连接每个短踪片集;以及
使用神经网络基于所述运动员的运动场向量来预测所述运动员的将来运动。
9.根据权利要求8所述的系统,其中,将所述广播视频馈送分割成统一视图,包括:
解析所述广播视频馈送以识别与所述体育赛事的相同视图相对应的第一视频帧子集;以及
丢弃与所述体育赛事的不同视图相对应的第二视频帧子集。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于斯塔特斯公司,未经斯塔特斯公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202080017536.8/1.html,转载请声明来源钻瓜专利网。
- 上一篇:润滑剂喷涂器
- 下一篇:从广播视频生成可跟踪视频帧的系统及方法