[发明专利]基于系统时钟的视频流帧时间戳的相关

说明书

本文描述的方法被配置为将视频流的帧与系统时钟进行相关。相关器应用经由总线接口从捕获设备接收视频流的帧，该帧包括起始帧时间戳和结束帧时间戳，该起始帧时间戳和结束帧时间戳基于捕获设备的设备时钟。第二起始帧时间戳和第二结束帧时间戳基于先前接收的帧和系统时钟而被预测。帧的扭斜值基于起始帧时间戳和结束帧时间戳之间的差而被计算。在所计算的扭斜值超过扭斜阈值时，帧被校正以与预测的起始帧时间戳和结束帧时间戳向。经校正的帧然后被提供以用于显示。以所描述的方式校正视频流帧的时间戳减少抖动并且实现多个视频流的准确同步。

技术领域

本发明的实施例总体上涉及计算机技术领域，并且具体地涉及用于基于系统时钟的视频流帧时间戳的相关的系统、方法和一种或多种设备。

背景技术

现代视频捕获设备使用各种不同类型的技术来捕获、处理、和发送或以其他方式传送捕获的视频数据。视频捕获设备可以被设计为主要捕获可见光视频、基于深度的视频、基于红外的视频或其组合。但是，在某些情况下，视频捕获设备用来处理和/或传送捕获的视频数据的技术限制了所得视频流的质量和/或对观看所得视频流的用户体验产生了负面影响。视频捕获设备的设备时钟可能会漂移，从而导致视频流中出现时间失真或“抖动”，视频处理操作可能会导致视频流扭斜而不同步，和/或通信总线或其他介质可能提供与在传送的另一端向用户提供高质量视频流所必需的相比可靠更低的数据传送。例如，使用通用串行总线(USB)技术来传送视频流的帧有可能会带来与传送后视频流中帧的准确时序相关联的各种挑战。

当多个视频流被组合以形成三维视频流、具有多个视点的视频流等时，这些挑战变得更加复杂。同步每个视频流需要每个帧的极其准确的时序，并且每个视频流可能由不同的视频捕获设备捕获，每个设备都具有独特的一组技术，这些技术必须被考虑以便将视频流与共享的时间帧进行相关。提供用于观看的组合视频流而没有明显的时间失真、抖动或引起负面用户体验的其他问题是一项艰巨的任务。

发明内容

提供本发明内容是为了以简化的形式介绍一些概念，这些概念将在下面的具体实施方式中进一步描述。本发明内容不旨在标识所要求保护的主题的关键特征或必要特征，也不旨在用于帮助限制所要求保护的主题的范围。

一种计算机化方法，包括：经由总线接口从捕获设备接收视频流的帧，该帧包括第一起始帧时间戳和第一结束帧时间戳，该第一起始帧时间戳和第一结束帧时间戳基于与捕获设备关联的设备时钟。基于视频流的多个先前接收的帧，与所接收的帧相关联的第二起始帧时间戳和第二结束帧时间戳被预测。该第二起始帧时间戳和第二结束帧时间戳还基于与显示系统关联的系统时钟。基于第一起始帧时间戳与第二起始帧时间戳之间的差以及第一结束帧时间戳与第二结束帧时间戳之间的差，所接收的帧的扭斜值(skew value)被计算。在所计算的扭斜值超过扭斜阈值时，所接收的帧被校正，以与第二起始帧时间戳和第二结束帧时间戳进行相关。然后经校正的视频流被提供以用于显示。

通过参考结合附图所考虑的以下具体实施方式，将更好地理解许多附带特征，因为它们将变得更好理解。

附图说明

图1是示出了根据实施例的包括计算设备和被配置为捕获视频流并且将视频流的帧进行相关的视频捕获设备的系统的示例性框图。

图2是示出了根据实施例的帧从视频捕获设备被传送到计算设备的示例性框图；

图3是示出了根据实施例的计算设备接收帧并且基于预测的时间戳将帧进行相关的操作的示例性流程图；

图4是示出了根据实施例的计算设备接收多个视频流的帧，将所接收的帧进行相关，并且将多个视频流组合成组合视频流的操作的示例性流程图；

图5将根据实施例的计算装置示出为功能框图。

在所有的附图中对应的附图标记指示对应的部件。在图1至图5中，系统被示出为示意图。附图可能未按比例绘制。

具体实施方式