[发明专利]图像处理装置及其控制方法

说明书

本发明提供一种图像处理装置及其控制方法。该图像处理装置包括：运动向量检测单元；生成单元，用于生成关于运动向量的信息作为元数据；记录单元，用于将各帧图像与所述元数据相关联地记录；以及控制单元，用于使所述运动向量检测单元通过使用经历了缩小处理或稀疏化处理的图像信号来进行运动向量检测，并且使所述运动向量检测单元基于所述元数据确定图像区域，并且通过使用没有经历缩小处理或稀疏化处理的、或者使用经历过以比摄像操作期间使用的缩小率小的缩小率而进行的缩小处理或使用经历过以比摄像操作期间使用的稀疏率小的稀疏率而进行的稀疏化处理的图像信号来进行运动向量检测。

技术领域

本发明涉及用于机械地或电子地校正摄像装置中的图像模糊的技术。

背景技术

近年来，能够拍摄运动图像的摄像装置的像素数迅速增加。拍摄全高清(full HD)大小的运动图像的摄像装置已经被广泛使用，并且能够拍摄4K运动图像的摄像装置也逐渐进入市场。此外，对于将来预定使用的8K超高清广播，正在推进技术研发。

利用这种倾向于更高清晰度的运动图像的趋势，针对用于校正摄像装置中的图像模糊的技术，不断要求用于校正更精细图像模糊的高精度技术。传统上，对校正拍摄图像中的模糊的图像稳定化功能做出了各种提议。例如，日本特开第2009-152802号公报公开了，将通过摄像装置检测的视频的运动向量信息与视频信号一起记录、并且当回放视频时进行图像稳定化处理的技术。

然而，如果视频信号的图像大小增大，则会在上述传统技术中用于检测图像模糊的运动向量检测电路中出现如下问题。

在图像具有诸如边缘等的特征形状的情况下，通过计算当前帧图像和过去帧图像之间的特征形状的图像的位置变化，来检测运动向量。因此，在用于检测运动向量的图像中的检测区域需要具有足以包括图像的特征形状的大小。小的检测区域引起运动向量检测的精度的劣化。与具有小的图像大小的运动图像相比，具有大的图像大小的运动图像在包括相同大小的被摄体的图像区域中具有更大量的像素数。例如，当将全高清(1920×1080像素)大小的运动图像与4K(3840×2160像素)运动图像进行比较时，像素数增大到4倍，当将全高清大小的运动图像与8K (7680×4320像素)运动图像进行比较时，像素数增大到16倍，其不可避免地导致电路规模的增大以及由电路规模的增大而引起的电力消耗的增加。

发明内容

本发明是鉴于上述问题而作出的，并且在抑制电路规模的增大的同时提高了运动向量检测精度。

根据本发明的第一方面，提供一种图像处理装置，所述图像处理装置包括：运动向量检测单元，其被构造为通过使用从图像传感器输出的图像信号进行运动向量检测；生成单元，其被构造为生成关于所述运动向量检测的结果的信息作为元数据；记录单元，其被构造为将从所述图像传感器输出的运动图像的各帧图像与所述元数据相关联地记录在记录介质中；以及控制单元，其被构造为，在摄像操作期间，使所述运动向量检测单元通过使用经历了缩小处理或稀疏化处理的从所述图像传感器输出的图像信号，来进行运动向量检测，而在回放记录图像的回放操作期间，使所述运动向量检测单元基于所述元数据确定各帧图像中的要经历运动向量检测的图像区域，并且通过使用没有经历缩小处理或稀疏化处理的、从所述记录介质输出的图像信号，或者通过使用经历过以比所述摄像操作期间使用的缩小率小的缩小率而进行的缩小处理的、或者经历过以比所述摄像操作期间使用的稀疏率小的稀疏率而进行的稀疏化处理的、从所述记录介质输出的图像信号，来进行运动向量检测。