[发明专利]用于中间帧图像处理的装置和计算机实现的方法

说明书

本文所述的实施方案提供了一种多传感器环境中的中间帧图像处理模式，例如通过处理在多个图像传感器之间相同的中间帧图像尺寸的中间帧图像数据对象来改善图像处理吞吐量和反应时间。示例性装置包括多个图像传感器，每个图像传感器被配置为捕获全帧图像数据对象并输出中间帧图像数据对象。该装置还包括图像帧复用器，该图像帧复用器能够与多个图像传感器中的每个图像传感器进行通信，并且被配置为接收多个中间帧图像数据对象并且输出从多个中间帧图像数据对象中选定的中间帧图像数据对象。该装置还包括处理器，该处理器能够与图像帧复用器进行通信，并且被配置为接收选定的中间帧图像数据对象并且处理选定的中间帧图像数据对象。

技术领域

本公开的实施方案整体涉及图像处理，并且具体地讲，涉及用于在所有图像传感器中利用公共图像数据格式(例如，中间帧图像尺寸)在多传感器环境中进行图像处理的装置和计算机实现的方法。

背景技术

在包括两个或更多个图像传感器的常规成像装置中，由图像传感器输出的图像需要组合成一个输出以用于处理。类似地，信号需要在两个或更多个传感器之间同步以保持系统效率和功效。为了执行此类操作，常规成像装置传统上利用可编程逻辑设备，诸如复杂可编程逻辑设备(“CPLD”)或现场可编程门阵列(“FPGA”)。此类计算装置将系统延迟添加到一个或多个帧，并且增加设备的复杂性、成本和尺寸。此外，常规成像装置传统上利用图像传感器的动态切换。两个或更多个传感器之间的常规动态切换传统上需要操作系统和/或驱动器支持，并且传统上需要在两个或更多个传感器之间进行切换时重新初始化每个图像传感器，进一步降低系统的反应时间(snappiness)。申请人发现了在具有两个或更多个图像传感器的多传感器环境中进行常规图像处理的当前具体实施的问题。通过所施加的努力、智慧和创新，申请人已通过开发体现在本公开中的解决方案解决了许多这些认识到的问题，下文将详细描述这些解决方案。

发明内容

一般来讲，本文提供的本公开的实施方案包括用于中间帧图像处理的系统、方法、装置和计算机程序产品。本领域技术人员在审查下列附图和详细的描述后，其他系统、装置、方法、计算机可读介质和特征将是显而易见的或将变得显而易见。旨在使包括在本说明书内的所有此类附加系统、装置、方法、计算机可读介质和特征在本公开的范围内，并且受以下权利要求书的保护。

根据本公开的一个方面，中间帧图像处理装置包括第一图像传感器，该第一图像传感器被配置为基于第一全帧图像尺寸和中间帧图像尺寸来输出第一中间帧图像数据对象。示例性中间帧图像处理装置还包括第二图像传感器，该第二图像传感器被配置为基于第二全帧图像尺寸和中间帧图像尺寸来输出第二中间帧图像数据对象。示例性中间帧图像处理装置还包括图像帧复用器，该图像帧复用器与第一图像传感器和第二图像传感器进行数据通信，并且被配置为从第一图像传感器接收第一中间帧图像数据对象并从第二图像传感器接收第二中间帧图像数据对象。图像帧复用器被进一步配置为输出从第一中间帧图像数据对象或第二中间帧图像数据对象中选定的中间帧图像数据对象。示例性中间帧图像处理装置还包括能够与图像帧复用器进行通信的处理器，该处理器被配置为从图像帧复用器接收选定的中间帧图像数据对象并处理选定的中间帧图像数据对象。

除此之外或另选地，在该装置的至少一些示例性实施方案中，基于中间帧图像尺寸配置至少第一图像传感器，并且输出中间帧图像数据对象，第一图像传感器被配置为通过执行以下操作中的一者或多者来从第一全帧图像数据对象生成第一中间帧图像数据对象：(1)剪裁第一全帧图像数据对象，以在第一中间帧图像数据对象中包括：第一全帧图像数据对象的经剪裁的图像数据部分，基于第一全帧图像尺寸和中间帧图像尺寸来识别该经剪裁的图像数据部分，以及(2)基于图像数据填充来填充第一中间帧图像数据对象，基于第一全帧图像尺寸和中间帧图像尺寸来识别该图像数据填充，并且将第一中间帧图像数据对象传输到图像帧复用器。

除此之外或另选地，在该装置的至少一些示例性实施方案中，第一全帧图像尺寸与第二全帧图像尺寸相差至少一个或多个数据行和/或一个或多个数据列。