[发明专利]并行计算机视觉和图像缩放架构

说明书

本发明的实施方案涉及包括在图像信号处理器中的视觉管道的架构。该架构包括前端部分，该前端部分包括产生更新的亮度图像数据的一对图像信号流水线。视觉管道架构的后端部分从前端部分接收更新的亮度图像，并对更新的亮度图像数据并行地执行缩放和各种计算机视觉操作。后端部分可以对连续缩放的亮度图像重复执行计算机视觉操作的该并行操作，以生成金字塔图像。

背景技术

由图像传感器捕获的图像数据或从其他数据源接收的图像数据通常在进一步处理或消耗之前在图像处理流水线中处理。例如，在提供给诸如视频编码器的后续部件之前，可校正、过滤或以其他方式修改原始图像数据。为了对捕获的图像数据执行校正或增强，可采用各种部件、单元级或模块。

可构造这样的图像处理流水线，使得能够以有利的方式执行对捕获的图像数据的校正或增强，而不消耗其他系统资源。虽然可通过在中央处理单元(CPU)上执行软件程序来执行许多图像处理算法，但是在CPU上执行这些程序将消耗CPU和其他外围资源的大量带宽以及增加功耗。因此，图像处理流水线通常被实现为与CPU分离的硬件部件，并且专用于执行一个或多个图像处理算法。

当处理更传统的图像信号处理算法时，传统的用于处理更复杂的图像信号处理算法的图像信号处理流水线结构常常牺牲性能。可向体系结构添加附加的硬件部件来提高性能，但是会导致更大的设备大小。然而，附加的硬件部件占用大量CPU带宽、增加功耗并增加设备大小。

发明内容

本发明实施方案涉及包括在图像信号处理器中的视觉管道的架构，其中调整大小操作和计算机视觉操作并行执行。所述架构包括前端部分和后端部分。前端部分包括产生当前亮度图像的预处理器和产生更新的亮度图像的缩放器。后端部分从前端部分接收更新的亮度图像数据，并且并行地对更新的亮度图像数据执行缩放和各种计算机视觉操作。后端部分包括一个或多个计算机视觉处理路径，其包括用于进一步缩放更新的亮度图像的缩放器和用于与缩放器执行缩放并行地执行计算机视觉操作的计算机视觉部件。可对由缩放器输出的更新的缩放亮度图像重复执行缩放和计算机视觉的并行操作。

附图说明

图1是根据一个实施方案的电子设备的高级图。

图2是示出根据一个实施方案的电子设备中的部件的框图。

图3是示出根据一个实施方案的使用图像信号处理器实现的图像处理流水线的框图。

图4是示出根据一个实施方案的图3的图像处理流水线的视觉模块的详细视图的框图。

图5示出了根据一个实施方案的用于与图像缩放操作并行地执行计算机视觉操作的流程图。

仅仅出于示例目的，附图描绘以及详细说明描述各种非限定性实施方案。

具体实施方式

现在将详细地参考实施方案，这些实施方案的示例在附图中示出。下面的详细描述中示出许多具体细节，以便提供对各种所描述的实施方案的充分理解。然而，可以在没有这些具体细节的情况下实施所述实施方案。在其他情况下，没有详细地描述众所周知的方法、过程、部件、电路和网络，从而不会不必要地使实施方案的各个方面晦涩难懂。

本公开的实施方案涉及用于与图像缩放并行地执行计算机视觉的视觉管道架构。视觉管道架构可包括用于执行预处理的前端电路部分和包括更多的计算机视觉电路和对当前亮度图像并行操作的缩放器电路的后端电路部分。计算机视觉电路可执行诸如生成方向梯度直方图(HOG)数据、卷积操作和关键点检测的操作。通过并行执行调整大小和计算机视觉操作，增强了图像处理性能。

示例性电子设备