[发明专利]用于多相机交通工具系统的动态图像融合

说明书

一种用于生成用于在交通工具中显示的组合视频的方法和系统。从被配置成安置在交通工具上的多个摄像机生成多个视频流。通过电子处理器来变换视频流以创建虚拟相机视点。组合经变换的视频流来生成组合视频，所述组合视频包括从摄像机中的第一摄像机生成的第一图像的一部分。电子处理器检测在交通工具外部的物体并且确定物体是否至少部分地遮掩第一图像的该部分。当该物体至少部分地遮掩第一图像的该部分时，电子处理器利用由摄像机中的第二摄像机生成的第二图像的一部分来补充第一图像的该部分。

相关申请

本申请要求2015年12月21日提交的美国临时申请号62/270445的优先权，所述美国临时申请的全部内容被通过引用结合于本文中。

背景技术

传统上，交通工具成像系统包括安置在交通工具的外部上的一个或多个摄像机。摄像机针对物体和危险而监视交通工具周围的区域。一些交通工具成像系统在仪表板上或仪表板附近提供显示器以用于供驾驶员观看。因此，增强了驾驶员对交通工具周围的区域的感知。在一些构造中，交通工具成像系统可以将多个相机视频流组合成组合视频以用于由驾驶员观看。所述多个相机视频流由视频处理装备处理，用来提供包括广角视图、自顶向下视图等等的多个不同的视图。

在图1中图解说明的一个已知系统中，来自在交通工具100的不同侧上隔开的四个广角（例如，全向）相机的相机馈送（feed）被组合成提供交通工具100的虚拟自顶向下视图的组合视频。在这样的系统中，自顶向下视频显示如图1中图解说明的交通工具100和周围的物体。然而，因为从多个全向相机生成虚拟自顶向下视图，所以组合视频包含失真的物体105，所述物体105具有拉伸的尺寸、裁切不正的边缘、扁平的表面等等。另外，由于阻挡摄像机130的视野125的阻挡物体120，自顶向下视频中的盲点115可能出现。

发明内容

实施例提供增强向交通工具的驾驶员显示的图像以得到改进视图的清晰度和视野的系统和方法。所述系统和方法增强失真的物体以提供交通工具和周围区域的改进视图。所述系统和方法还动态地融合多个视频流来减少由图像中的物体引起的盲点。

一个实施例提供一种生成用于在交通工具中显示的组合视频的方法。该方法包括从被配置成安置在交通工具上的多个摄像机生成多个视频流。通过电子处理器来变换所述多个视频流中的一个或多个视频流，从而创建虚拟相机视点。组合所述多个经变换的视频流来生成组合视频，所述组合视频包括从所述多个摄像机中的第一摄像机生成的第一图像的一部分。电子处理器检测在交通工具外部的物体并且确定物体是否至少部分地遮掩第一图像的该部分。当物体至少部分地遮掩第一图像的该部分时，电子处理器利用由所述多个摄像机中的第二摄像机生成的第二图像的一部分来补充第一图像的该部分。

另一实施例提供一种用于生成要在交通工具中显示的组合视频的系统。该系统包括多个摄像机，所述多个摄像机生成多个视频流并且被配置成安置在交通工具上。该系统还包括显示器和通信地耦合到所述多个摄像机和显示器的电子处理器。电子处理器被配置成变换所述多个视频流来创建虚拟相机视点。电子处理器组合所述多个经变换的视频流，用来生成组合视频，所述组合视频包括从所述多个摄像机中的第一摄像机生成的第一图像的一部分。电子处理器检测在交通工具外部的物体并且确定物体是否至少部分地遮掩第一图像的该部分。当物体至少部分地遮掩第一图像的该部分时，电子处理器利用由所述多个摄像机中的第二摄像机生成的第二图像的一部分来补充第一图像的该部分。

通过考虑详细的描述和随附各图，本发明的其它方面将变得显而易见。

附图说明

图1是如在交通工具显示器上显示的交通工具和周围区域的自顶向下透视图。

图2是根据一个实施例的装备有动态图像融合和增强系统的交通工具的框图。

图3是依照一个实施例的图2的交通工具的电子控制单元和关联连接的框图。

图4是利用图2的动态图像融合和增强系统来增强视频的方法的流程图。