[发明专利]图像处理装置、图像处理方法和程序

说明书

技术领域

本发明涉及图像处理装置、图像处理方法和程序，更具体地，涉及用于使用多个图像执行图像组合处理的图像处理装置和方法以及用于允许计算机执行该方法的程序。

背景技术

近年来，成像被摄体(如人或动物)以生成图像数据并记录图像数据作为图像内容的成像装置(如数字照相机或数字摄像机(例如，可携式摄像机))已经普及。此外，已经提出这样的成像装置，其通过根据被摄体自动地执行适当的曝光控制来生成适当的捕获图像。

这里，当关于具有大的亮度差的场景(例如背后照亮的场景)利用曝光控制执行成像操作时，预期成像装置中提供的成像器件不具有足够的动态的范围。当成像器件的动态范围不够时，在捕获图像的饱和亮区域中可能出现全白(whiteout)，或者在捕获图像的暗区域中可能出现全黑(blackout)。

因此，已经提出这样的成像装置，其通过组合利用不同曝光时段的成像处理生成的长曝光图像和短曝光图像，生成具有宽动态范围的组合图像。然而，当在生成组合图像时使用的组合对象图像中包括运动物体时，存在生成包括运动前后的运动物体的组合图像并且看起来不自然(所谓多曝光)的可能性。

因此，提出这样的成像装置，其计算长曝光图像和通过将长曝光图像乘以长曝光图像和短曝光图像之间的曝光比获得的短曝光图像之间的差，并且根据该差是否超过预定水平切换用于生成组合图像的图像(例如，见JP-A-2002-101347的图3)。在该成像装置中，例如，当该差超过预定水平时，确定在短曝光图像和长曝光图像之间存在图像偏移，并且根据差的极性切换组合对象图像。

发明内容

根据上述技术，即使在生成组合图像时使用的组合对象图像中包括运动物体时，也可以防止运动物体区域中的运动物体的余像或断点的出现。

然而，在上述技术中，当在运动物体区域中两个图像之间的差超过预定水平时，长曝光图像和通过其乘以曝光比获得的短曝光图像根据差的极性切换为组合对象图像。因此，可以防止运动前后的运动物体的余像或断点的出现。然而，长曝光图像和通过将其乘以曝光比获得的短曝光图像在组合对象图像的切换的边界附近共存。因此，存在图像连续性劣化并获得不自然的组合图像的可能性。

因此，在关于包括运动物体的图像生成具有宽动态范围的组合图像时，重要的是在考虑运动物体的同时生成适当的组合图像。

因此，期望在关于包括运动物体的图像生成具有宽动态范围的组合图像时生成考虑运动物体的适当的组合图像。

根据本发明实施例，提供了一种图像处理装置和图像处理方法，以及使得计算机执行该图像处理方法的程序，该图像处理装置包括：转换部分，其转换运动物体图像，该运动物体图像是对应于构成在不同曝光条件下生成的多个图像的参考图像和其它图像中包括的运动物体的区域中的图像，使得对应于运动物体的参考图像中的运动物体图像具有其它图像的曝光水平，以便对于每个其它图像生成曝光水平转换后运动物体图像；置换部分，其用生成的曝光水平转换后运动物体图像置换每个其它图像的对应于曝光水平转换后运动物体图像的区域，以便为每个其它图像生成置换图像，该每个其它图像对应于在生成曝光水平转换后运动物体图像时用作参考曝光水平的曝光水平；以及组合部分，其将为每个其它图像生成的置换图像和参考图像组合以生成组合图像。利用该配置，转换运动物体图像，使得运动物体图像具有其它图像的曝光水平，以便对于每个其它图像生成曝光水平转换后运动物体图像；用生成的曝光水平转换后运动物体图像置换每个其它图像的对应于曝光水平转换后运动物体图像的区域，以便为每个其它图像生成置换图像，该每个其它图像对应于在生成曝光水平转换后的运动物体图像时用作参考曝光水平的曝光水平，并且将为每个其它图像生成的置换图像和参考图像相互组合以生成组合图像。

在本发明的实施例中，图像处理装置还可以包括确定部分，其基于多个图像的ISO灵敏度和曝光差确定是否生成组合图像。利用该配置，可以基于 多个图像的ISO灵敏度和曝光差确定是否生成组合图像。

在本发明的实施例中，当多个图像的ISO灵敏度低于预定参考值并且多个图像的曝光差小于预定参考值时，确定部分可以确定要生成组合图像。利用该配置，当多个图像的ISO灵敏度低于预定参考值并且多个图像的曝光差小于预定参考值时，可以确定要生成组合图像。