[发明专利]图像处理设备、方法和程序

权利要求书

1.一种图像处理设备，包括：

面部图像检测单元，其从输入图像中检测面部图像；

姿势估计单元，其根据由所述面部图像检测单元检测的面部图像的位置，估计输入图像中的人物的姿势；

手位置检测单元，其根据所述姿势估计单元估计的姿势，检测人物的手的位置；

手图像提取单元，其根据所述手位置检测单元检测的人物的手的位置信息，从输入图像中提取人物的手图像；

手形指定单元，其根据所述手图像提取单元提取的手图像，指定人物的手的形状；

手形时间序列存储单元，其通过与手的位置信息相对应，来把由所述手形指定单元指定的手的形状保存为时间序列；以及

手势识别单元，其根据通过与手的位置信息相对应而在所述手形时间序列存储单元中保存为时间序列的与手的形状有关的信息来识别手势，所述手势是利用人物的手的手姿势。

2.根据权利要求1所述的图像处理设备，还包括：

手势存储单元，其针对每种手势，通过与手的位置信息相对应而把与手的形状有关的信息保存为时间序列，

其中所述手势识别单元把通过与手的位置信息相对应而在所述手形时间序列存储单元中保存为时间序列的与手的形状有关的信息，和针对每种手势通过与手的位置信息相对应而在所述手势存储单元中保存为时间序列的与手的形状有关的信息进行比较，然后根据比较结果来识别手势。

3.根据权利要求2所述的图像处理设备，还包括：

相似度计算单元，其计算通过与手的位置信息相对应而在所述手形时间序列存储单元中保存为时间序列的与手的形状有关的信息，和针对每种手势通过与手的位置信息相对应而在所述手势存储单元中保存为时间序列的与手的形状有关的信息之间的相似度，

其中所述手势识别单元把具有最大相似度的手势设定为识别结果。

4.根据权利要求3所述的图像处理设备，其中当最大相似度小于预定阈值时，所述手势识别单元认为不存在作为识别结果的手势。

5.根据权利要求3所述的图像处理设备，还包括：

登记单元，当最大相似度小于预定阈值时，所述登记单元把通过与手的位置信息相对应而在所述手形时间序列存储单元中保存为时间序列的与手的形状有关的信息与预定手势相对应，从而将所述与手的形状有关的信息登记在所述手势存储单元中。

6.根据权利要求1所述的图像处理设备，还包括：

背景差分提取单元，其从人物的估计姿势的整个范围中提取信息，并将所提取的信息作为背景差分信息提供给所述手位置检测单元。

7.一种图像处理设备的图像处理方法，所述图像处理设备包括面部图像检测单元，其从输入图像中检测面部图像；姿势估计单元，其根据由所述面部图像检测单元检测的面部图像的位置，估计输入图像中的人物的姿势；手位置检测单元，其根据所述姿势估计单元估计的姿势，检测人物的手的位置；手图像提取单元，其根据所述手位置检测单元检测的人物的手的位置信息，从输入图像中提取人物的手图像；手形指定单元，其根据所述手图像提取单元提取的手图像，指定人物的手的形状；手形时间序列存储单元，其通过与手的位置信息相对应，来把由所述手形指定单元指定的手的形状保存为时间序列；以及手势识别单元，其根据通过与手的位置信息相对应而在所述手形时间序列存储单元中保存为时间序列的与手的形状有关的信息来识别手势，所述手势是利用人物的手的手姿势，所述信息处理方法包括：

利用所述面部图像检测单元从输入图像中检测面部图像；

利用所述姿势估计单元，根据在面部图像的检测中检测到的面部图像的位置，估计输入图像中的人物的姿势；

利用所述手位置检测单元，根据在人物姿势的估计中估计的姿势，检测人物的手的位置；

利用所述手图像提取单元，根据在手的位置的检测中检测到的人物的手的位置信息，从输入图像中提取人物的手图像；

利用所述手形指定单元，根据在手图像的提取中提取的手图像，指定人物的手的形状；

利用所述手形时间序列存储单元，通过与手的位置信息相对应，来把在手形的指定中指定的手的形状保存为时间序列；以及

利用所述手势识别单元，根据通过与手的位置信息相对应而在手形的保存中保存为时间序列的与手的形状有关的信息，来识别手势，所述手势是利用人物的手的手姿势。

8.一种程序，所述程序使控制图像处理设备的计算机执行下述步骤，所述图像处理设备包括面部图像检测单元，其从输入图像中检测面部图像；姿势估计单元，其根据由所述面部图像检测单元检测的面部图像的位置，估计输入图像中的人物的姿势；手位置检测单元，其根据所述姿势估计单元估计的姿势，检测人物的手的位置；手图像提取单元，其根据所述手位置检测单元检测的人物的手的位置信息，从输入图像中提取人物的手图像；手形指定单元，其根据所述手图像提取单元提取的手图像，指定人物的手的形状；手形时间序列存储单元，其通过与手的位置信息相对应。来把由所述手形指定单元指定的手的形状保存为时间序列；以及手势识别单元，其根据通过与手的位置信息相对应而在所述手形时间序列存储单元中保存为时间序列的与手的形状有关的信息来识别手势，所述手势是利用人物的手的手姿势：

利用所述面部图像检测单元，从输入图像中检测面部图像，

利用所述姿势估计单元，根据在面部图像的检测中检测到的面部图像的位置，估计输入图像中的人物的姿势，

利用所述手位置检测单元，根据在人物姿势的估计中估计的姿势，检测人物的手的位置，

利用所述手图像提取单元，根据在手的位置的检测中检测到的人物的手的位置信息，从输入图像中提取人物的手图像，

利用所述手形指定单元，根据在手图像的提取中提取的手图像，指定人物的手的形状，

利用所述手形时间序列存储单元，通过与手的位置信息相对应，来把在手形的指定中指定的手的形状保存为时间序列，以及

利用所述手势识别单元，根据通过与手的位置信息相对应而在手形的保存中保存为时间序列的与手的形状有关的信息，来识别手势，所述手势是利用人物的手的手姿势。