[发明专利]使用阵列相机执行高速视频捕获和深度估计的系统和方法

摘要

本发明公开了使用阵列相机的高速视频捕获和深度估计。真实世界场景通常包括与相机位于不同距离的物体。因此，在通过相机阵列捕获视频期间进行深度估计可导致从真实世界场景中捕获的图像数据更加流畅地呈现视频。本发明的一个实施方案包括从不同视点捕获图像的相机以及从相机组获取图像的图像处理流水线应用程序，其中每组相机相对于其他组相机以交错的开始时间开始捕获图像数据。接着，该应用程序选择参考视点，并通过执行差异搜索以识别不同视点的像素最为相似时的差异，从而确定将从交替视点捕获的像素移位至该参考视点的场景相关几何校正。然后可使用该校正呈现视频帧。

主权项

一种阵列相机，包括：多个相机，所述多个相机从不同视点捕获场景的图像；存储器，所述存储器包含图像处理流水线应用程序；其中所述图像处理流水线应用程序引导所述处理器进行以下操作：从所述多个相机内的多组相机获取图像数据，其中每组相机相对于其他组相机以交错的开始时间开始捕获图像数据；选择参考视点，并通过执行差异搜索以识别不同视点的像素最为相似时的差异，从而确定将从交替视点捕获的像素移位至所述参考视点的场景相关几何校正；以及呈现视频的帧，其中通过以下方式呈现视频的给定帧：使用包括在给定帧捕获时间间隔期间由至少一组相机捕获的像素的像素；并使用针对从所述交替视点捕获的所述像素确定的场景相关几何校正，将从交替视点捕获的像素移位至所述参考视点。