[发明专利]图像合成设备及其控制方法

说明书

技术领域

本发明涉及图像合成设备和控制这种设备的方法。

背景技术

在显示运动画面和游戏视频的设备中，有着所显示面孔被另一面孔替代的情况。例如有一种系统，其中为街头游戏机装备了摄像机，从而可以用用户的面孔取代游戏中出现的人物的面孔(参见已登记日本实用新型3048628的说明书)。此外，有一种系统自动跟踪运动画面中人物面孔的运动并能够组成图像，在该图像中，将面孔图像转换成期望的形状(参见日本专利申请公开文本No.2002-269546的说明书)。

不过，在已经拍摄了用户面孔的情况下，在显示用户的所拍摄面孔时会出现问题。具体而言，尽管已经想到用另一面孔替换用户的拍摄的面孔。但对于这种简单的替换来说，常常不能知道在替换之前用户面孔如何出现。

发明内容

因此，本发明的一个目的是进行这样的设置，使得即使用另一图像替换用户的图像，仍然能够知道用户的情况如何。

根据本发明，上述目的是通过提供一种图像合成设备实现的，所述图像合成设备包括：图像感测装置，用于感测对象图像并输出表示所述对象图像的图像数据；面孔图像检测装置(面孔图像检测手段)，用于从已经从所述图像感测装置输出的图像数据表示的对象图像检测面孔图像；面孔情况检测装置(面孔情况检测手段)，用于检测面孔情况，所述面孔情况是由所述面孔图像检测装置检测到的面孔图像表示的面孔取向(faceorientation)和表情的至少一种；替换装置(替换手段)，用于利用与所述面孔情况检测装置检测到的面孔情况一致的合成面孔图像替换所述面孔图像检测装置检测到的面孔图像；以及显示控制装置(显示控制手段)，用于控制显示单元，以便显示其中的面孔图像已经被所述替换装置用合成面孔图像替换的对象图像。

本发明还提供了一种适于上述图像合成设备的控制方法。具体而言，本发明提供了一种控制图像合成设备的方法，包括如下步骤：感测对象的图像并输出表示对象图像的图像数据；从通过图像感测获得的图像数据表示的对象图像检测面孔图像；检测面孔情况，所述面孔情况是由所述面孔图像检测处理检测到的面孔图像表示的面孔取向和表情的至少一种；利用与通过面孔情况检测处理检测到的面孔情况一致的合成面孔图像替换已由面孔图像检测处理检测到的面孔图像；以及控制显示单元，以便显示其中的面孔图像已经被替换处理用合成面孔图像替换的对象图像。

根据本发明，感测对象的图像并从图像感测获得的对象图像检测面孔图像。检测所检测到的面孔的情况，所述情况是面孔取向和情绪的表情之一或两者。利用与检测到的面孔情况一致的合成面孔图像替换检测到的面孔图像。显示面孔图像已经被合成面孔图像替换的对象图像。

由于利用作为合成面孔图像的另一面孔图像替换通过图像感测获得的对象图像中的面孔图像，因此即使在不能显示对象面孔的情况下也能显示整个感测到的对象图像。具体而言，替换的合成面孔图像表现出与检测到的面孔图像相同的取向和情绪表情，表情的范例有喜悦、愤怒、忧伤和高兴等。因此，尽管未显示对象图像中的面孔图像，但仍能够弄清对象即人等的面部取向和表情是什么。

该替换装置(a)利用与所述面孔检测装置检测到的面孔情况一致的合成面孔图像替换所述面孔图像检测装置检测到的面孔图像，该合成面孔图像是由针对每种面孔情况存储于合成面孔图像数据存储装置中的合成面孔图像数据表示的；或(b)将预定面孔图像转换成与面孔检测装置检测到的面孔情况一致的合成面孔图像，并利用通过转换获得的合成面孔图像替换由面孔图像检测装置检测到的面孔图像。

结合附图，从以下描述将明了本发明的其他特征和优点，在附图的所有图示中相似的附图标记表示相同或类似的部分。

附图说明

图1是示出了图像合成设备电气配置的方框图；

图2A和2B示出了合成面孔图像的范例；

图3是示出了图像合成设备执行的处理的流程图；

图4示出了通过图像感测获得的对象图像范例；

图5示出了其中的面孔图像已被替换的对象图像范例；

图6示出了通过图像感测获得的对象图像范例；

图7示出了其中的面孔图像已被替换的对象图像的范例；

图8和9示出了根据另一个实施例的合成面孔图像的范例；

图10是示出了图像合成设备执行的处理的流程图；

图11示出了根据另一实施例的装饰范例；以及

图12示出了根据本实施例的合成面孔图像的范例。

具体实施方式

现在将参考附图详细描述本发明的优选实施例。

图1是示出了根据本发明第一实施例的图像合成设备20的电气配置的方框图。