[发明专利]图像处理装置和图像处理方法

说明书

技术领域

本发明涉及图像处理装置和图像处理方法。

背景技术

以往，公知有根据拍摄的动态图像帧间的运动数据进行动态图像的校正处理的装置。例如，在下面的专利文献1中公开了以下装置：计算基准图像与比较图像间的运动数据，利用运动数据，按每个对应的块计算图像间的像素值的差分，根据该像素值的差分，按每个块决定基准图像与比较图像的重叠比率，进行重叠处理，得到合成图像，由此得到更鲜明的手抖校正图像。

专利文献

专利文献1：日本特开2009-164857号公报

此外，公知有通过合成由多个照相机拍摄的图像而取得具有立体感的立体图像的技术。此外，还公知有连续地拍摄、显示这种立体图像来取得立体动态图像的技术。在这种立体动态图像中，与普通的动态图像同样，需要进行手抖校正、失真校正等校正处理。在分别对从多个摄像元件取得的图像独立地进行专利文献1中记载的手抖校正的情况下，无法得到从各摄像元件取得的图像间的手抖校正的匹配性，可能无法进行适当的校正处理。

发明内容

因此，本发明的目的在于提供能够进行在从多个摄像元件得到的图像之间具有匹配性的校正处理的图像处理装置和图像处理方法。

本发明的图像处理装置对由摄像装置拍摄的多个帧图像进行图像处理，其中，所述摄像装置具有多个依次连续地拍摄第1帧图像和第2帧图像的摄像元件，所述图像处理装置的特征在于，该图像处理装置具有：设置信息取得部，其按每个摄像元件，取得表示摄像元件相对于摄像装置的设置状态的设置信息；运动信息取得部，其取得第1帧图像和第2帧图像间的摄像装置的运动信息；以及输出区域取得部，其按每个摄像元件，取得第2输出区域的位置信息，该第2输出区域是第2帧图像内的区域，与第1帧图像内的第1输出区域对应，输出区域取得部根据由设置信息决定的第1输出区域的位置信息和运动信息，取得多个摄像元件中的作为基准的基准摄像元件的第2输出区域，输出区域取得部根据基准摄像元件的设置信息、多个摄像元件中的不同于基准摄像元件的其它摄像元件的设置信息以及运动信息，取得其它摄像元件的第2输出区域。

本发明的图像处理方法用于对由摄像装置拍摄的多个帧图像进行图像处理，其中，摄像装置具有多个依次连续地拍摄第1帧图像和第2帧图像的摄像元件，图像处理方法的特征在于，该图像处理方法包括以下步骤：设置信息取得步骤，按每个摄像元件，取得表示摄像元件相对于摄像装置的设置状态的设置信息；运动信息取得步骤，取得第1帧图像和第2帧图像间的摄像装置的运动信息；以及输出区域取得步骤，按每个摄像元件，取得第2输出区域的位置信息，该第2输出区域是第2帧图像内的区域，与第1帧图像内的第1输出区域对应，在输出区域取得步骤中，根据由设置信息决定的第1输出区域的位置信息和运动信息，取得多个摄像元件中的作为基准的基准摄像元件的第2输出区域，在输出区域取得步骤中，根据基准摄像元件的设置信息、多个摄像元件中的不同于基准摄像元件的其它摄像元件的设置信息以及运动信息，取得其它摄像元件的第2输出区域。

根据这种发明，根据由设置信息决定的第1输出区域的位置信息和运动信息，取得基准摄像元件的第2输出区域，根据基准摄像元件的设置信息、其它摄像元件的设置信息以及运动信息，取得多个摄像元件中的不同于基准摄像元件的其它摄像元件的第2输出区域。此处，基准摄像元件的第2输出区域和其它摄像元件的第2输出区域是根据在这些摄像元件之间通用的运动信息而取得的，因此，能够进行在从多个摄像元件得到的图像之间具有匹配性的校正处理。

此处，还可以具有判定部，该判定部针对所有摄像元件，判定第2输出区域的位置信息是否位于第2帧图像内，在第2输出区域的位置信息不位于第2帧图像内的情况下，输出区域取得部对根据第1输出区域的位置信息与第2输出区域的位置信息之间的差分求出的移动量进行缩小调整，直到在所有摄像元件中，第2输出区域的位置信息位于第2帧图像内为止。该情况下，可以防止由于第2输出区域不位于第2帧图像内而导致无法进行图像处理。

运动信息取得部可以从基准摄像元件拍摄的第1帧图像和第2帧图像中取得运动信息。该情况下，能够从图像取得运动信息，因此不需要新的硬件的结构，就能够取得多个摄像元件中通用的运动信息。

运动信息取得部可以通过陀螺仪传感器取得运动信息。该情况下，能够从陀螺仪传感器取得多个摄像元件中通用的运动信息，因此能够降低运算负荷。