[发明专利]比赛状态检测和轨迹融合

说明书

本文描述了用于比赛状态检测和轨迹融合的示例系统。该系统包括跟踪器，用于基于来自多个相机的图像获得球位置和选手位置，以及融合控制器，用于组合经由球位置检测到的多个轨迹以获得融合轨迹。该系统还包括被配置为对比赛模式进行建模的有限状态机，其中，经由作为有限状态机的输入的球位置、选手位置和融合轨迹来确定比赛状态。

背景技术

多个相机被用于捕捉场景中的活动，并且使得终端用户能够观看场景并且在整个场景中进行完全360度的移动。例如，多个相机可用于捕捉体育比赛，并且终端用户可以在整个比赛场地上自由移动。终端用户也可以从虚拟相机观看比赛。

附图说明

图1包括比赛状态监视器和沉浸式观看模块；

图2是图示出比赛场地的框图；

图3是图示出将一个比赛回合解析为多个状态的框图；

图4是图示出带有美式橄榄球比赛中的进攻的状态和阶段的时间线的框图；

图5是比赛状态转变图；

图6A是多个轨迹的图示；

图6B是融合轨迹的图示；

图7是用于比赛状态检测的方法的过程流程图；

图8是多相机球定位方法的过程流程图的图示；

图9是图示出用于球位置融合的方法的过程流程图；

图10是用于结合球位置融合的比赛状态检测的方法的过程流程图；

图11是图示出比赛状态检测和轨迹融合的框图；并且

图12是示出存储用于比赛状态检测和轨迹融合的代码的计算机可读介质的框图。

相同的数字在本公开和附图各处始终被用于提及相似的组件和特征。100系列的数字指代最初出现于图1中的特征；200系列的数字指代最初出现于图2中的特征；等等依此类推。

具体实施方式

体育赛事和其他竞赛经常被广播，供终端用户娱乐。这些比赛可被以各种格式渲染。例如，比赛可以被渲染为二维视频或三维视频。可以使用定位在整个比赛场地周围的一个或多个高分辨率相机来捕捉比赛。多个相机可以捕捉包括比赛场地在内的整个三维体积空间。在实施例中，相机系统可以包括多个超高分辨率相机来进行体积捕捉。终端用户可以观看比赛的动作，并且在捕捉的体积中自由移动。此外，终端用户可以从虚拟相机观看比赛，该虚拟相机通过在三维体积空间中跟随球或特定选手来跟随场地内的动作。提供这样的沉浸式体验可能一部分是基于对球和选手的自动实时高准确度跟踪。此外，如本文描述的系统还自动跟踪球，并且在比赛进行期间实时检测高光时刻。通过这种方式，向终端用户实时提供沉浸式媒体体验。

本技术经由若干个模块来实现比赛状态检测。这些模块可以基于比赛状态被启用或禁用。就本文使用的而言，比赛状态可以指比赛的特定状态。比赛的状态可以对应于特定的比赛回合、比赛期间的特定中断时间、特殊打法、加时赛、比分、持球的球队、不持球的球队、比赛时钟、比赛回合期间剩余的时间、或者这些的任何组合。通过这种机制，可以监视比赛状态，并且动态地配置计算模块来提供一种高效且节约(cast-saving)的系统。此外，本技术使得能够在比赛期间检测球，包括在球是可见的和不可见的时候。如果球是可见的，则使用直接物体检测算法。否则，可以基于持球选手的位置来检测球位置。可以从持球选手的位置推断球位置，并且根据融合算法将其与其他球位置相融合。