[发明专利]图像处理设备和图像处理方法

说明书

技术领域

本发明涉及图像处理设备和图像处理方法，尤其涉及提高多视点图像编码的编码效率。

背景技术

最近，把图像信息处理为数字数据，并在把图像信息处理为数字数据的时候，高效地保存或传送所述信息的设备，例如利用诸如离散余弦变换之类的正交变换处理和运动补偿进行压缩的，遵照诸如MPEG(运动图像专家组)之类系统的设备已开始在广播电台和一般家庭中普及。

特别地，MPEG-2(ISO/IEC13818-2)被定义为通用图像编码系统，现在广泛用在专业用途和消费用途的各种应用之中。此外，与MPEG-2编码系统相比，需要更大量的编码和解码计算，但是能够实现更高编码效率的H.264和MPEG-4Part 10(下面记为“H.264/AVC(高级视频编码)”)图像编码系统已标准化。

这种图像编码系统通过降低时间方向和空间方向的冗余性，压缩信息量。例如，就对其进行意图降低空间冗余性的画面内预测编码的I画面来说，利用像素之间的相关性生成预测图像。就对其进行意图降低时间冗余性的画面间预测编码的P画面来说，以称为前向图像的块单元检测运动向量，并利用检测的运动向量生成预测图像。此外，就B画面来说，以称为前向画面和后向画面的块单元检测运动向量，并利用检测的运动向量生成预测图像。顺便提及，就B画面来说，第一参考画面被称为L0预测的参考画面，第二参考画面被称为L1预测的参考画面。

H.264/AVC系统允许从多个已编码画面中选择参考画面。另外，用参考索引管理选择的参考画面。参考索引被用作指示检测的运动向量所涉及的画面，并与指示检测的运动向量的信息一起被编码。

0以上的数值被设定为参考索引。另外，参考索引的数值越小，在参考索引的编码之后的信息量(代码量)越小。此外，可以随意向参考画面分配参考索引。从而，向大量的运动向量所涉及的参考画面分配较小数目的参考索引，能够减少当编码参考索引时的代码量，从而提高编码效率。

另外，在日本专利公开No.2010-63092中，当对隔行扫描系统的2D图像进行场编码时，向时间上接近编码对象画面的参考画面分配小数值的参考索引。

发明内容

在帧连续(FS)-AVC和多视点视频编码(MVC)中，不仅进行利用时间方向的图像之间的相关性的时间预测，而且进行利用不同视点的图像之间的相关性的视差预测。

图1表示当编码三个视点的移动图像数据时的预测参考关系。顺便提及，假定Cam0表示左侧的视点的图像数据，Cam1表示中央视点的图像数据，Cam2表示右侧的视点的图像数据。另外，假定Cam1的图像数据是利用Cam0和Cam2的图像数据作为参考画面的图像数据编码的从属视图的图像数据。此外，当编码从属视图的图像数据时所涉及的图像数据被称为基本视图的图像数据。

另外，Cam1的图像数据中的B画面把在前向预测中所涉及的Cam1的P画面和在视差预测中所涉及的Cam0的Bs画面之一设定为L0预测(List_0)中的参考画面，如点划线箭头所示。另外，所述B画面把在后向预测中所涉及的Cam1的P画面和在视差预测中所涉及的Cam2的Bs画面之一设定为L1预测(List_1)中的参考画面，如虚线箭头所示。

LIST_X(X为0或1)中可用的两个画面是用参考索引ref_idx的编号管理的，并被赋予0以上的值。另外，参考索引ref_idx是变长编码的，包括在编码之后的图像数据中。顺便提及，图1图解说明参考索引ref_idx＝0被分配给时间预测用参考画面，参考索引ref_idx＝1被分配给视差预测用参考画面。另外，参考索引ref_idx的变长编码使参考索引ref_idx＝0的代码长度短于参考索引ref_idx＝1的代码长度。

这种参考索引的分配通常在整个序列内是固定的。从而，在作为从属视图的Cam1的图像数据的编码中，当频繁使用代码长度较长的参考索引的参考画面时，参考索引的信息量增大，从而不能获得高的编码效率。

从而，理想的是提供一种能够提高多视点图像的编码中的编码效率的图像处理设备和图像处理方法。

按照本发明的第一实施例，提供一种图像处理设备，包括：用于生成特征量的特征量生成部分，所述特征量用作判定利用时间方向的图像之间的相关性的时间预测，和利用不同视点的图像之间的相关性的视差预测中的哪一个在图像编码中占优势的判定标准；和参考索引分配部分，所述参考索引分配部分根据特征量生成部分生成的特征量，向在预测中使用的参考画面分配参考索引。