[发明专利]图像处理设备及其方法

说明书

技术领域

本发明涉及脸部图像区域的图像处理。

背景技术

用于改善肖像图像质量的技术正引起越来越多的关注。例如，可使用的技术包括：在日本特开2002-247596中公开的红眼校正技术，以及在日本特开平11-250227中公开的校正肖像以使皮肤看起来光滑的技术等。

为了改善肖像的印象，不仅眼部和皮肤的图像质量改善而且嘴部的图像质量改善都具有很大的影响。例如，将泛黄的或染色的牙齿校正为白色，以使这些牙齿看起来干净健康，从而改善整个肖像的印象。日本特开2006-059162公开了如下发明：从脸部图像区域(下文中称为脸部图像)检测牙齿图像区域(下文中称为牙齿图像)，并根据预定目标值将所检测到的牙齿图像校正为白色。

然而，人们对脸部图像的图像质量的感觉是很敏感的。给定器官和其他器官的颜色之间需要平衡，如果给定器官的颜色与其他器官的颜色相差很大，则人们会感到不自然。例如，当牙齿图像经过白色校正时，如果该牙齿图像的色度水平(chroma level)相对于该牙齿图像周围的色度水平太低，则在脸部图像中只有牙齿突出，导致不自然的脸部图像。

特别地，整体上具有高色度水平的脸部图像的牙齿周围的颜色的色度水平高。如果以与整体上具有低色度水平的脸部图像相同的方式对这样的牙齿图像进行白色校正，则形成牙齿非常突出的脸部图像。换而言之，必须考虑整个脸部图像的色度水平，来确定校正牙齿图像所需的目标值。

发明内容

在一个方面中，一种图像处理设备，包括：第一检测器，用于从图像检测与牙齿相对应的第一图像区域；第二检测器，用于从所述图像检测与所述牙齿以外的脸部部位相对应的第二图像区域；以及校正器，用于基于所述第一图像区域的颜色的特征量和所述第二图像区域的颜色的特征量，来校正所述第一图像区域的颜色。

在另一方面中，一种图像处理方法，包括：从图像检测与牙齿相对应的第一图像区域；从所述图像检测与所述牙齿以外的脸部部位相对应的第二图像区域；以及基于所述第一图像区域的颜色的特征量和所述第二图像区域的颜色的特征量，来校正所述第一图像区域的颜色。

根据这些方面，可以校正牙齿图像区域的颜色，而不会形成不自然的脸部图像。

通过下面参考附图对示例性实施例的说明，本发明的其他特征将变得显而易见。

附图说明

图1是示出图像处理设备的布置的框图；

图2是用于说明图像处理的流程图；

图3是用于说明牙齿图像的检测的流程图；

图4示出脸部图像的例子；

图5是用于说明接触嘴部图像的边缘的线段的图；

图6示出嘴部的候选矩形和外接矩形之间的关系；

图7是用于说明嘴唇图像的检测的图；

图8示出嘴唇图像的直方图的例子；

图9是用于说明牙齿图像的平均色度值的计算方法的流程图；

图10示出嘴部的外接矩形；

图11示出牙齿区域的二值化掩模图像；

图12是用于说明眼白图像的检测的流程图；

图13示出眼部候选矩形；

图14示出眼部的候选矩形和外接矩形之间的关系；

图15是用于说明眼部图像的检测的图；

图16是用于说明眼白图像的检测方法的流程图；

图17是用于说明眼白图像的检测方法的图；

图18示出眼部图像和所获取的像素的亮度值之间的关系的例子；

图19是用于说明种子的确定的图；

图20是用于说明眼白图像的检测方法的图；

图21示出作为区域生长结果的生长区域；

图22是用于说明眼白图像的平均色度值的计算的图；

图23示出眼部区域的二值化掩模图像；

图24示出牙齿区域的混合掩模图像；

图25是用于说明牙齿图像的校正的流程图；

图26是用于说明校正图像的生成的流程图；

图27示出相对于整个图像有倾斜的脸部图像；

图28是用于说明根据第二实施例的图像处理的流程图；以及

图29是用于说明基于皮肤区域来计算校正参数的流程图。

具体实施方式

以下将参考附图来详细说明根据本发明实施例的图像处理。

第一实施例

概述

第一实施例将说明在对牙齿图像应用白色校正时，通过分析眼白图像区域(下文称为眼白图像)的色度水平来确定校正目标值的方法。