[发明专利]用于将图像基元部署至计算构造的图像流管线控制器

说明书

技术领域

本申请涉及图像处理，具体地，涉及用于将图像基元集部署至图像计算构造的方法、装置和系统。

背景技术

许多设备包括一个或多个图像传感器和/或图像显示器，并且图像处理单元可以促进来自传感器的、被提供至显示器的、和/或以其它方式由运行在设备上的应用所利用的数据的处理。例如，智能电话可以包括多个不同的摄像机和触摸屏。图像处理单元可以包括具有多个不同的组件以处理图像信息的图像计算构造（fabric）。

在一些情况下，图像处理单元可以基于输入图像数据（例如，从智能电话的摄像机接收到的）来执行一系列图像基元（primitive）以创建输出图像数据（例如，要被发送至触摸屏的）。图像基元例如可以与图像基元库相关联，并且可以包括例如传感器基元、校准基元、光学基元等。

通常，结合图像处理单元而执行的应用确定将由图像计算构造的各种组件执行哪些图像基元。例如，应用可以确定将由固定功能硬件执行过滤器基元。然而，此类方法会具有若干缺点。例如，应用可能未觉察到另一应用也在尝试使用相同的固定功能硬件。因而，应用可能“停止（stall）”或者需要等待直到固定功能硬件变为空闲，并且系统的性能可能降级。

此外，图像基元的大量数目和相对复杂性（以及它们可以结合不同的图像执行构造的不同组件来不同地操作的事实）可能导致大量的软件开发成本并抑制应用软件开发者（他们可能被促使创建针对每个新平台的定制软件）的创新。

发明内容

根据本申请的第一方面，它公开了一种用于图像处理的方法，包括：在图像管线控制器处确定具有要被执行的多个图像基元的图像流，每个图像基元与图像算法和基元属性集相关联；以及由图像管线控制器至少部分地基于基元属性将图像基元集自动地部署至图像计算构造。

根据本申请的第二和第三方面，它进一步公开了用于实现由本申请的第一方面所公开的方法的装置和系统。

附图说明

图1是设备的框图。

图2是成像处理单元的框图。

图3是根据一些实施例的成像处理单元的框图。

图4是图示根据一些实施例的方法的流程图。

图5图示根据一些实施例的卷积（convolution）图像基元的基元属性。

图6是根据一些实施例的具有基元属性数据库或其它数据结构的成像处理单元的框图。

图7是根据一些实施例的具有初始化组件和定序器组件的成像处理单元的框图。

图8是根据一些实施例的处理多个图像流的成像处理单元的框图。

图9是根据一些实施例的提供固定功能硬件的软件代理仿真的成像处理单元的框图。

图10A至10C图示根据一些实施例的图像流中的区段。

图11是根据一些实施例的用于区段属性定义的图形用户界面的示例。

图12是图示根据一些实施例的与图像流区段相关联的方法的流程图。

图13是根据一些实施例的包括图像计算构造和软件架构特性的总体视图。

具体实施方式

图1是可以包括例如一个或多个图像传感器110和/或图像显示器120的设备100的框图。传感器110可以包括例如摄像机、视频摄像机、深度传感器、和/或立体图像传感器。显示器120可以包括例如触摸屏、高分辨率显示器、和/或三维图像。图像处理单元130可以促进来自传感器110的、被提供至显示器120的、和/或以其它方式由运行在设备100上的应用所利用的数据的处理。注意，设备100可以进一步包括一个或多个补充接口140，诸如数字显示接口（例如，要被耦合至数字电视或计算机监视器）、无线天线、或者通用串行总线（USB）接口。注意，设备可以与例如智能电话、平板计算机、移动计算设备、移动电话、台式计算机、膝上型计算机、游戏系统、机顶盒、或者电视相关联。

图1中所图示的设备100可以经由任何通信网络交换信息，所述通信网络可以是以下中的一个或多个：局域网（“LAN”）、城域网（“MAN”）、广域网（“WAN”）、专有网络、公共交换电话网络（“PSTN”）、无线应用协议（“WAP”）网络、蓝牙网络、无线LAN网络、和/或网际协议（“IP”）网络，诸如因特网、内联网、外联网。注意，本文所描述的任何设备可以经由一个或多个此类通信网络进行通信。