[发明专利]捕获运动并使运动与记录的音频/视频同步

说明书

本公开内容提供用于使运动数据与音频/视频流同步的方法和系统。获取包括至少一个定时标记的音频/视频流。处理音频/视频流以检测至少一个定时标记。获取与音频/视频流关联的运动数据和用于运动数据的定时信息，定时信息包括关于至少一个定时标记的定时信息。将具有检测到的至少一个定时标记的音频/视频流以及运动数据与定时信息一起输出。

技术领域

本公开涉及一种用于捕获与音频/视频记录关联的运动数据并且用于使运动数据与播放的音频/视频记录同步的方法和系统。

背景技术

在消费性电子产品的发展中，摄像机已经可以以较低的成本用于许多配置中。这带来了这种摄像机的广泛使用。在其用途中，用户记录他们参与的动作镜头已经成为趋势，例如当进行休闲或体育活动时。例如，使用摄像机(称为运动型摄像机)记录用户所沉浸的环境的动态图像和音频，车辆的驾驶员可以记录风景道路上的汽车行驶，或者滑降滑雪者可以记录滑行。

与此同时，实现振动-运动效果的运动模拟器通常用于增强视频节目的观看体验。在这种技术中，运动模拟器包括座椅或平台，座椅或平台由致动器以与视听节目或视觉事件同步的振动-运动效果移动。在特定类型的这种运动模拟器中，与从视听节目的声轨提取的振动相反，运动模拟器可以基于编码为运动轨迹的运动信号而移动。

期望使用运动模拟器向运动型摄像机的音频/视频记录添加振动-运动效果。

发明内容

本公开的目的是提供一种用于捕获与音频/视频记录关联的运动数据并且用于使运动数据与播放的音频/视频记录同步的新颖方法。

本公开的另一个目的是提供一种用于捕获与音频/视频记录关联的运动数据并且用于使运动数据与播放的音频/视频记录同步的新颖系统。

根据一个广义方面，提供了一种用于使运动数据与音频/视频流同步的方法。生成用于在音频/视频流中捕获的至少一个定时标记。获取包括至少一个定时标记的音频/视频流。处理音频/视频流以检测至少一个定时标记。获取与音频/视频流关联的运动数据以及运动数据的定时信息，定时信息包括关于至少一个定时标记的定时信息。基于定时信息和在音频/视频流中检测到的至少一个定时标记，使运动数据与音频/视频流同步。

根据一个广义方面，提供了一种用于使运动数据与音频/视频流同步的方法，包括：获取音频/视频流，音频/视频流包括至少一个定时标记；处理音频/视频流以检测至少一个定时标记；获取与音频/视频流关联的运动数据以及运动数据的定时信息，定时信息包括关于至少一个定时标记的定时信息；以及输出具有检测到的至少一个定时标记的音频/视频流以及具有定时信息的运动数据。

在一些实施例中，获取运动数据包括通过至少一个运动传感器捕获运动数据，与生成至少一个定时标记基本上同时开始。

在一些实施例中，该方法还包括基于定时信息和在音频/视频流中检测到的至少一个定时标记使运动数据与音频/视频流同步，由此输出音频/视频流包括输出与音频/视频流同步的运动数据。

在一些实施例中，同步运动数据包括通过基于至少一个定时标记改变运动数据的定时信息以与音频/视频流对齐来生成同步运动文件。

在一些实施例中，该方法还包括基于同步生成包括运动数据到音频/视频流的映射的定时文件。

在一些实施例中，该方法还包括输出与音频/视频流的播放同步的运动数据。

在一些实施例中，输出运动数据包括基于运动数据引起至少一个运动系统的移动。

在一些实施例中，该方法还包括生成包括用于引起至少一个运动系统的移动的指令的运动文件，运动文件基于运动数据并且与音频/视频流对齐。

在一些实施例中，使运动数据与音频/视频流同步包括:使运动数据的数据点与音频/视频流中的至少一个定时标记对齐。