[发明专利]用于将图像基元部署至计算构造的图像流管线控制器

权利要求书

1.一种用于图像处理的方法，包括：

在图像管线控制器处确定图像流，所述图像流具有与要被执行用于处理图像数据的不同类型的图像算法相关联的多个图像基元，每个图像基元由提供处理以创建输出的图像数据的成像应用使用，其中所述多个图像基元与包括以下中的至少一个的图像基元库相关联：（i）传感器基元，（ii）校准基元，（iii）光学基元，（iv）发光基元，（v）分段基元，或（vii）过滤器基元；以及

由图像管线控制器至少部分地基于用于描述所述多个图像基元的操作的各方面的基元属性将所述多个图像基元自动地部署至图像计算构造。

2.如权利要求1所述的方法，其中图像计算构造包括多个图像处理组件，包括以下中的至少一个：（i）固定功能硬件图像处理单元，（ii）单指令多数据图像执行单元，（iii）超长指令字处理单元，或者（iv）通用处理单元。

3.如权利要求2所述的方法，进一步包括：

执行工作负载分发算法以选择接收图像流中的图像基元之一的图像处理组件。

4.如权利要求3所述的方法，其中工作负载分发算法基于基元属性和图像处理组件状态来选择固定功能硬件图像处理单元或者所述固定功能硬件图像处理单元的软件仿真之一。

5.如权利要求4所述的方法，其中所述选择进一步基于以下中的至少一个：（i）功率和性能策略，（ii）资源预留优先级，（iii）管线优先级，或者（iv）资源可用性仲裁优先级。

6.如权利要求3所述的方法，其中工作负载分发算法针对与图像计算构造中的图像基元的执行相关联的功率或者性能减少停止和优化。

7.如权利要求1所述的方法，其中图像管线控制器与以下中的至少一个相关联：（i）硬件图像管线控制器，（ii）软件图像管线控制器，或者（iii）硬件和软件图像管线控制器组件的组合。

8.如权利要求1所述的方法，其中与多个图像流相关联的图像基元被部署。

9.如权利要求8所述的方法，其中不同的图像流与正被操作系统执行的不同的应用相关联，并且关于图像流的信息与应用编程接口相关联。

10.如权利要求8所述的方法，进一步包括：

在不同的图像流中的图像基元之间执行负载平衡算法。

11.如权利要求1所述的方法，进一步包括：

针对管线序列中的有序图像基元执行而执行定序算法以对图像流内的图像基元进行排序。

12.如权利要求11所述的方法，其中图像基元与原始次序相关联，并且所述执行针对管线序列中的无序图像基元执行而对图像基元的至少一些采用不同于原始次序的次序被执行。

13.如权利要求1所述的方法，其中图像基元的子集与图像流区段相关联。

14.如权利要求13所述的方法，其中图像流区段与用于以下的至少一个图像流属性相关联：（i）工作负载分发，（ii）停止减少，（iii）功率优化，（iv）性能优化，（v）负载平衡，或者（vi）定序算法。

15.如权利要求1所述的方法，其中图像流与图像数据集相关联，并且进一步包括：

至少部分地基于基元属性来确定图像数据的拼贴子集是否要被部署至图像计算构造。

16.如权利要求1所述的方法，其中图像属性由开发者定义并且存储在基元属性数据库内。

17.如权利要求16所述的方法，其中至少一个基元属性与以下中的至少一个相关联：（i）多个计算单元，（ii）性能值，（iii）功率值，（iv）热值，或者（v）排名偏好。

18.如权利要求1所述的方法，其中图像流与以下中的至少一个相关联：（i）摄像机传感器，（ii）视频传感器，（iii）显示屏，（iv）深度传感器或立体图像对，或者（v）三维图像。

19.如权利要求1所述的方法，其中至少一个图像算法与以下中的至少一个相关联：（i）像素校正，（ii）伪迹去除，（iii）直方图信息，（iv）按比例缩放功能，（v）面部识别，（vi）视觉对象识别，（vii）视觉场面分析，（viii）机器视觉，（ix）手势识别，或者（x）深度图计算。