[发明专利]动作视频的自动数字管理和标记

说明书

本申请要求2012年6月11日申请的美国临时专利申请号为61/689,654、名称为“Auto Digital Curation And Tagging OfAction Videos”的申请以及2013年1月4日申请的美国专利申请号13/734,818、名称为“Automatic Digital Curation And Tagging OfAction Videos”的申请的优先权，通过引用将它们的全部内容并入本文。

本申请包括受版权保护的素材。当由任何人对本专利公开的拓制出现在专利和商标局文件或者记录中时，版权拥有者对其没有异议，但是在其它情况下版权拥有者保留全部版权权利。

技术领域

本发明一般涉及用于记录视频的设备的领域，并且特别地涉及一种用于动作视频的自动数字管理和标记的方法和装置。

背景技术

便携摄像机的广泛可用性引起了短的自制和专业视频的激增。很多这些视频，尤其是利用POV(Point OfView：视点)动作摄像机制作的，都涉及极限动作，例如高山滑雪、单板滑雪、冲浪、山地自行车等等。例如，YouTube网站上包含成千上万个这样的视频。

同时，这些视频的巨大数量以及流行度产生了自身的问题。首先，当创作者没有将感兴趣的事件与视频明确地关联时，找到感兴趣的视频就变得非常困难。其次，由于大部分视频都是由业余爱好者制作并且是没有被编辑过的，所以即使用户仅仅对视频的某些特定部分(例如当单板滑雪者跳起或者滑雪者有跑动的特别快的部分时，或者在更大的视频中的任何其它特定事件)感兴趣，他们也不得不观看整个视频。

同时，具有GPS和其他传感器的便携设备的广泛流行允许精确地测量、存储以及分类极限体育活动。因此，如果视频和性能数据可以在时间和空间上同步，则可以基于拍摄的特定活动的性能矩阵来注释、编辑、选择以及标记视频镜头(video footage)。

搜索或者观看这样的视频的人可能期望找到特定视频或者视频的一部分。例如，这样的人可能想搜索显示空中时间超过一秒种的单板滑雪跳跃的视频。但是，对典型地仅使用语义和文本视频描述的视频标记使用当前可用的装置是不切实际或者不可能的。

另一个与很多动作视频相关的问题是它们是由一个人制作的，而针对视频“主体”的性能数据是通过与作为不同的人的视频主体并列(collocated)的传感器收集的。

已经尝试在获取期间标示视频以用于快速选择。但是，这样的方案典型地使用基于由其他人创建或者在视频中找到的文本的标签。

美国专利7,624,337和美国专利7,823,055公开了一种使用文本(包括视频中的文本)来创建标签和元数据用于此后视频搜索的使用的方案。

Heist等人的美国专利5,832,171描述了视频和文本的同步，其中文本是针对视频创建的。

Blanton等人的美国专利4,873,585教导了允许从视频选择特定运动的图像以允许容易地访问这些图像的系统。但是，这需更操作者介入和决策。

Aman等人的美国专利7,483,049公开了体育运动的视频的数据库的创建。但是，该视频必须在运动员被视频中能够被识别的可见或者不可见的标志标示的严格控制的环境中通过多台摄像机创建。

还有一种通过特定事件(大部分是交通违章)触发视频的研究成果。Higgins的美国专利7,986,339描述了一种能够记录和分析交通违章的静止和视频图像的系统。但是，该视频记录是通过由车辆产生的外部物理信号(例如激光或者多普勒雷达)触发的。Lock的美国专利6,919,823以及Behrens的美国专利7,633,433是类似的，采用通过红灯变化或者在红灯变化后的激光束中断产生的触发信号。

此外，在上述情况中，摄像机和视频主体的相对位置是提前知道的，因此该方案不提供任意时间和空间域搜索以匹配事件和视频镜头。

发明内容

在一个实施例中，本公开提供了一种方法和系统，其允许视频和相应的性能数据的同步，并且随后基于该性能数据标记和/或编辑视频。可以通过并列的设备(也就是相同的设备)或者不同的设备以及不同的用户来收集该视频和性能数据。视频和性能数据还可以存储在相同的设备中或者存储在不同的设备或者数据库中。本发明因此能够提供来自不同数据组或者不同数据库的视频和性能数据的匹配以及随后视频的自动编辑、注释和标记。即使视频和性能数据被独立记录并且不具有其它活动的明确知识，本发明也可以实现。