[发明专利]成像装置、成像方法和计算机程序

说明书

技术领域

本发明涉及成像装置、成像方法和计算机程序。具体而言，本发明涉及这样一种成像装置，其从作为对象的人的脸部图像中检测预定的特征，通过根据脸部特征的位置对脸部的位置、角度和脸部的大小进行正规化来获取正规化脸部图像，在从正规化脸部图像中检测到特定表情时捕捉对象的脸部的图像，从而以很高的自动拍摄准确水平在对象的脸部变化到预定表情时执行拍摄操作。更具体而言，本发明涉及这样一种成像装置，其在所捕捉到的对象图像中包含的预定图像满足预定条件时自动执行拍摄操作，其中如果在捕捉到的图像中检测到不满足预定条件的特定图像，则成像装置通过通知对象拍摄操作是响应于得到满足的预定条件而执行的，来提示对象满足预定条件。

背景技术

诸如数字静态相机、数字摄像机等等之类的捕捉静态图像的成像装置目前被广泛使用。例如，日本未经实审专利申请公布No.2005-56387公开了一种成像装置，如果在捕捉到的对象图像中检测到微笑的脸部图像，则该成像装置自动拍摄对象。

发明内容

此类成像装置并不会以100％的准确水平来检测脸部，并且脸部检测结果经常包含差错。如果捕捉到的图像中包含的非脸部图像被检测为脸部图像，则不仅会基于检测到的脸部图像而不正确地执行微笑脸部判定，而且有可能触发无规律的拍摄操作。

此类成像装置在从捕捉到的图像检测到微笑的脸部图像前不会进行拍摄。在经过没有拍摄操作被触发的很长一段等待时间后，作为对象的人可能会开始认为成像装置有可能出现了设备故障。这种情形导致对象无法安心，从而使得对象难以微笑。

因此，希望提高在作为对象的人的脸部变化到特定表情时执行的自动拍摄操作的准确水平。还希望在未得到满足的预定条件阻止了自动拍摄操作开始的情况下提示对象满足预定条件。

根据本发明的一个实施例，一种用于处理图像的图像处理装置，包括：脸部检测器，用于基于从成像单元提供来的捕捉到的图像的图像信息，来检测捕捉到的图像中包含的脸部的图像；脸部特征检测器，用于基于由脸部检测器检测到的脸部图像的图像信息，来检测脸部图像中包含的脸部特征；正规化器，用于基于由脸部特征检测器检测到的脸部特征的检测位置来对由脸部检测器检测到的脸部图像进行正规化，并且生成正规化脸部图像；以及脸部表情检测器，用于基于由正规化器生成的正规化脸部图像的图像信息，来检测脸部图像中包含的脸部表情。

根据本发明的实施例，脸部特征检测器检测由脸部检测器检测到的脸部图像中包含的预定脸部特征，例如眼睛、鼻子等等。正规化器基于由脸部特征检测器检测到的脸部特征的检测位置，就脸部的位置、脸部的角度和脸部的大小中的至少一个来对脸部检测器检测到的脸部图像进行正规化，并且生成正规化脸部图像。

由正规化器生成的正规化脸部图像中的像素数目小于脸部图像在正规化操作之前的像素数目。更具体而言，脸部图像需要相对较大的像素数目(更高的分辨率)，以便脸部特征的位置可被以更高的准确水平检测到。如果表示了脸部的一般特征，那么允许检测特定表情的正规化脸部图像就是可接受的，因此不需要较大的像素数目。通过将正规化脸部图像的像素数目设置为小于脸部图像的像素数目，节约了存储器容量，并且高速地执行了关于脸部表情是否是特定表情的判定过程。

脸部表情检测器基于正规化脸部图像的图像信息来检测特定表情。特定表情可以是微笑脸部、哭泣脸部等等。当特定表情被检测到时，拍摄控制器发出指令以执行拍摄操作。这样，在作为对象的人变到特定表情时，拍摄操作被自动执行。

根据本发明的实施例，特定表情是利用正规化脸部图像的图像信息来检测的，在正规化脸部图像中，脸部的位置、角度和大小等等根据脸部特征的检测位置被正规化。从而，与利用未正规化的脸部图像的图像信息来检测特定表情的成像装置相比，该成像装置提供了更高的特定表情检测准确度。本发明实施例的成像装置从而提高了在对象的脸部表情变化到特定表情时触发的自动拍摄操作的准确水平。

该图像处理装置还可包括正规化判定单元，用于基于由正规化器生成的正规化脸部图像的图像信息，来判定脸部图像的正规化操作是否已成功完成。如果正规化判定单元判定脸部图像的正规化操作已成功完成，并且如果脸部表情检测器已检测到特定表情，则拍摄控制器可指示成像单元执行拍摄操作。

脸部检测器可能检测到处于非正脸位置的脸部图像。脸部特征检测器可能将脸部的非特征部分检测为脸部特征。在这种情况下，正规化脸部图像是非脸部图像、非正脸图像和倾斜脸部图像之一。响应于这种图像，脸部表情检测器可能提供不正确的检测结果。在这种情况下，正规化判定单元判定正规化操作失败，从而避免了拍摄差错。