[发明专利]图像处理装置和图像处理方法

说明书

本发明公开了图像处理装置和图像处理方法。用于群体的图像序列的图像处理装置包括：被配置为获取所述群体的图像序列的单元，其中所述群体包括至少两个人；被配置为检测所述图像序列的每个图像中的每个人的面部区域的单元；被配置为识别所述图像序列的每个图像中的每个人的面部区域的属性的单元；以及被配置为基于所述图像序列的每个图像中的每个人的面部区域的属性来确定群体属性的单元。本发明基于群体属性来选择面部区域或图像，由此能够获得群体的令人满意的图像和/或能够应对除预定属性之外的各种其它属性。

技术领域

本发明一般涉及图像处理、计算机视觉和模式识别的领域，特别涉及用于群体的图像序列和视频序列的图像处理装置、以及用于群体的图像序列和视频序列的图像处理方法。

背景技术

在拍摄群体（包括至少两个个体，例如，包括至少两个人）的图像序列的情况下，通常希望能够方便地从其获得令人满意的图像，在所述令人满意的图像中，每个人的属性（例如，诸如“微笑”、“悲伤”和“中性”的表情属性，或者诸如“眨眼”、“皱鼻”和“张嘴”的运动单元属性）都是令人满意的。

为了应对这一情形，已经提出各种图像处理方法，其中一种被示于图1（参见US2011/0109770A1）中。在图1的流程图中，首先，在步骤10处，图像中的每个面部被检测。接下来，在步骤20处，通过将每个面部的评估出的预定表情转换成数值，计算每个面部的预定表情值。然后，在步骤30处，基于对于所有面部的多个预定表情值，计算群体的决定表情值。在步骤40处，判断决定表情值是否等于或大于预定阈值。如果是，那么在步骤50处所述图像被存储，并且然后处理前进至步骤60；否则，处理直接前进至步骤60。在步骤60处，判断是否还有其它图像。如果是，那么处理前进至移动至下一图像的步骤70，并且然后处理回到步骤10；否则，处理结束。

然而，以上图像处理方法具有许多限制。

首先，这样的方法利用群体的决定表情值来选择图像，这使得由此选择的图像可能未示出每个人的令人满意的表情。例如，对于一个图像，如果群体的大多数具有同一“微笑”表情而仅仅少数人具有诸如“悲伤”或“中性”的不同表情，那么所述图像仍可能被这样的方法选择。然而，群体的情绪基调（emotional tone）（或氛围（atmosphere））应该是大多数的表情（即，“微笑”），并且所述图像中的少数人的“悲伤”或“中性”表情不与其一致。由此，所述图像并不能被视为令人满意的图像，因为并不是所有的表情都与群体的情绪基调最一致。

其次，这样的方法是基于预定表情（例如，“微笑”）并计算每个面部的预定表情值。如果一个图像中的群体不具有预定表情（例如，每个人都具有“悲伤”表情），那么所述图像根本就不将被选择。然而，不包含预定表情的图像可能仍具有其它显著的效果（例如，“悲伤”或“震惊”效果）。由此，包含除预定表情之外的各种其它表情的极好图像可能被错过。

因此，希望能够提供能够应对以上问题中的至少一个问题的新图像处理装置和新图像处理方法。

发明内容

鉴于以上问题中的至少一个问题提出本发明。

本发明的一个目的是提供用于群体的图像序列和/或视频序列的新图像处理装置、以及用于群体的图像序列和/或视频序列的新图像处理方法。

本发明的另一目的是提供能够从群体的图像序列和/或视频序列获得令人满意的图像的图像处理装置和图像处理方法，在所述令人满意的图像中，每个个体的属性都尽可能地与群体属性一致。

本发明的又一目的是提供能够应对除预定属性之外的各种其它属性的图像处理装置和图像处理方法。