[发明专利]面部表情识别装置及方法和摄像装置

权利要求书

1.一种面部表情识别装置，该面部表情识别装置包括：

图像输入单元，用于顺次输入图像；

面部检测单元，用于检测由所述图像输入单元获得的图像中的面部；

开始确定单元，用于基于由所述面部检测单元检测到的面部图像信息确定是否开始面部表情确定；

获取单元，用于在所述开始确定单元确定应当开始面部表情确定时，基于由所述面部检测单元检测到的所述面部图像信息获取参照特征信息；以及

面部表情确定单元，用于在所述开始确定单元确定开始所述面部表情确定时从由所述面部检测单元检测到的所述面部图像信息提取特征信息，并基于所提取的特征信息和所述参照特征信息确定所检测到的面部的面部表情。

2.根据权利要求1所述的面部表情识别装置，其中，所述面部表情确定单元基于所提取的特征信息与所述参照特征信息之间的差或比率确定面部表情。

3.根据权利要求1或2所述的面部表情识别装置，该面部表情识别装置还包括：

有效性确定单元，用于检测由所述面部检测单元检测到的面部的面部大小、面部朝向以及检测可靠性中的至少一个，并基于所述检测结果确定所检测到的面部的有效性，

其中，所述开始确定单元和所述面部表情确定单元对关于由所述有效性确定单元确定为有效的面部的图像信息执行确定。

4.根据权利要求1至3中的任一项所述的面部表情识别装置，其中，所述开始确定单元基于构成面部器官的特征点相对于所述面部上的特定位置的坐标值确定是否开始面部表情确定。

5.根据权利要求1至3中的任一项所述的面部表情识别装置，其中，所述开始确定单元基于所检测到的面部上的特定位置与构成面部器官的特征点之间的距离确定是否开始面部表情确定。

6.根据权利要求1至3中的任一项所述的面部表情识别装置，其中，所述开始确定单元基于通过对所检测到的面部执行空间滤波获得的输出值确定是否开始面部表情确定。

7.根据权利要求1至3中的任一项所述的面部表情识别装置，其中，所述开始确定单元在根据在经过预定的帧数次或预定时间的一系列图像中检测到的面部图像信息获得的特征的变化在规定范围之内时，确定应当开始面部表情确定。

8.根据权利要求1至3中的任一项所述的面部表情识别装置，其中，所述开始确定单元保持通过对从多个面部图像获得的特征进行统计预处理而设置的标准，并在根据所检测到的面部图像信息获得的特征位于根据所述标准的规定范围之内时确定应当开始面部表情确定。

9.根据权利要求1至3中的任一项所述的面部表情识别装置，其中，所述开始确定单元在所检测到的面部图像中的特定区域的像素计数满足规定条件时，确定应当开始面部表情确定。

10.根据权利要求9所述的面部表情识别装置，其中，当瞳孔区域的像素计数不小于规定值时，所述特定区域的像素计数满足所述规定条件。

11.根据权利要求9所述的面部表情识别装置，其中，当牙齿颜色的区域的像素计数不超过规定值时，所述特定区域的像素计数满足所述规定条件。

12.根据权利要求1至11中的任一项所述的面部表情识别装置，其中，当所述开始确定单元再次确定应当开始面部表情确定一直到所述面部表情确定单元确定所述面部上的面部表情为止时，在再次进行的开始确定之后，使用由所述获取单元获取的参照特征信息来更新所述参照特征信息。

13.根据权利要求1至12中的任一项所述的面部表情识别装置，其中，所述面部表情确定单元对所述参照特征信息中包含的特征以及所提取的特征信息中包含的特征的变化进行加权，以便基于所加权的变化来确定所检测到的面部的面部表情。

14.根据权利要求1至13中的任一项所述的面部表情识别装置，该面部表情识别装置还包括：个人标识认证单元，用于基于由所述面部检测单元检测到的面部图像执行个人标识认证。