[发明专利]具有实现不同精度的软件及硬件算法的评价层的图像处理器

说明书

技术领域

本发明的领域一般地涉及图像处理，并且更特别地涉及图像数据在图像处理器中的处理。

背景技术

图像处理在各种各样的不同应用中是重要的，并且这样的处理可以涉及二维(2D)图像、三维(3D)图像，或者多个不同类型的图像的组合。例如，空间场景的3D图像可以在图像处理器中使用三角剖分基于由使每个相机具有不同的场景视角而布置的各个相机捕获的多个2D图像来生成。作为选择，3D图像能够直接使用深度成像器(例如，结构光(SL)相机或飞行时间(ToF)相机)来生成。在此同样称为深度图像的这些及其他3D图像通常用于机器视觉应用(例如，姿势识别)中。

在典型的常规布局中，来自图像传感器的原始图像数据通常要经过各种预处理操作。除了别的以外，这样的预处理操作还可以包括例如对比度增强、直方图均衡化、噪声降低、边缘突出显示以及坐标空间变换。所预处理的图像数据然后会受到为了实现姿势识别或一种机器视觉应用所需的附加处理。

发明内容

在一种实施例中，图像处理器包括用于实现至少包括评价层和识别层的多个处理层的图像处理电路。评价层包括软件实现的部分和硬件实现的部分，评价层的软件实现部分被配置用于使用软件算法来生成第一精度等级的第一对象数据，而评价层的硬件实现部分被配置用于使用硬件算法来生成比第一精度等级低的第二精度等级的第二对象数据。评价层还包括被配置用于组合第一及第二对象数据以生成待传递给识别层的输出对象数据的信号组合器。

评价层可以说明性地耦接于图像处理器的预处理层与识别层之间，该预处理层接收来自图像传感器的原始图像数据并且将预处理的图像数据提供给评价层，尽管众多别的布局都是可能的。

举例来说(仅为示例)，评价层可以按照图像处理器的姿势识别系统的评价子系统的形式来实现。

本发明的其他实施例包括(但不限于)方法、装置、系统、处理设备、集成电路，以及具有实现于其内的计算机程序代码的计算机可读存储介质。

附图说明

图1是在一种实施例中的图像处理系统的框图，包括配置有使用预处理层、评价层、识别层和应用层进行的姿势识别功能的图像处理器。

图2至5示出了在图1的系统中的图像处理器的示例性评价层的各方面。

图6至8是示出在图1的系统内的图像处理器的评价层的各个实施例中的各组处理操作的流程图，使用头部跟踪应用作为示例。

具体实施方式

本发明的实施例在本文中将结合示例性的图像处理系统来说明，该图像处理系统包括图像处理器或者使用多个处理层来实现姿势识别功能的其他类型的处理设备。但是，应当理解，本发明的实施例可更一般地应用于得益于更有效的图像处理的任何图像处理系统或者关联的设备或技术。

图1示出了在本发明的一种实施例中的图像处理系统100。图像处理系统100包括用于接收一个或多个图像源105的图像并将处理的图像提供给一个或多个图像目的地107的图像处理器102。图像处理器102同样经由网络104与多个处理设备106通信。

尽管图像源105和图像目的地107在图1中被显示为与处理设备106分离的，但是这样的源和目的地中的至少一个子集可以至少部分地使用一个或多个处理设备106来实现。因此，图像可以经由网络104提供给图像处理器102，以便由一个或多个处理设备106处理。类似地，处理的图像可以由图像处理器102通过网络104传递给一个或多个处理设备106。因此，可以将这样的处理设备视为图像源或图像目的地的实例。

给定的图像源可以包括例如配置用于生成深度图像的3D成像器(例如，SL相机或ToF相机)，或者配置用于生成灰度图像、彩色图像、红外图像或其他类型的2D图像的2D成像器。同样可能的是，单个成像器或其他图像源能够提供深度图像和相应的2D图像(例如，灰度图像、彩色图像或红外图像)两者。例如，某些类型的现有3D相机能够产生给定场景的深度图，以及同一场景的2D图像。作为选择，用于提供给定场景的深度图的3D成像器能够布置于单独的高分辨率视频摄相机附近，或者是提供基本上相同场景的2D图像的其他2D成像器。