[发明专利]用于编码和解码多视角图像的方法和装置

说明书

技术领域

与本发明一致的装置和方法涉及处理多视角(multi-view)图像，且更具体地说，涉及编码和解码用于多视角显示装置的多视角图像。 

背景技术

多视角图像处理系统几何地校正通过多个照相机拍摄的图像并且执行空间合成和其他处理，由此向用户提供多个方向的各种视角。 

多视角图像编码和解码标准一般利用H.264，或者多视角编码(MVC)编解码器通常利用多视角图像编码和解码标准。 

在多视角图像编码中，同时编码经多个照相机输入的提供多视角图像的图像。同样，通过使用时间相关性(dependency)和照相机的视角间空间相关性来将多视角图像编码为压缩流。 

根据解码器的性能和用户的选择在显示装置上显示压缩流。 

显示装置考虑视角之间的相关性而适当地解码输入图像，并且在屏幕上显示解码图像。在这种情况下，显示装置能够通过使用所希望的单个视角来显示图像，或能够通过使用两个视角来显示立体图像。 

同样，通常支持一个视角的显示装置通过在多个视角中从一个视角切换到另一视角来显示多个视角。 

然而，支持多个视角的多视角显示装置应当形成立体对图像以便获得立体效果。 

在示范实施例中，当通过选择两个视角形成立体图像时，对于多视角显示装置有效的是，选择一对图像，其中左视角和右视角彼此具有适当的距离以便获得立体效果。然而，多视角显示装置无法在两个垂直布置的视角之间获得立体效果。 

发明内容

技术问题 

可是，现有技术中的多视角显示装置无法指定一对图像，且为了利用多个视角顺序形成对而造成延迟。 

技术方案 

本发明提供了一种用于编码多视角图像的方法和装置，其能够通过在H.264或多视角编码(MVC)编解码器中定义立体对信息(stereo pairinformation)而形成有效的立体图像。 

本发明也提供了一种用于解码多视角图像的方法和装置，其能够通过从H.264或MVC编解码器中提取使能立体对信息而形成有效的立体图像。 

本发明也提供了一种用于显示多视角图像的方法和装置，其能够通过提供和接收在H.264或MVC编解码器中的立体对信息而形成有效的立体图像。 

有益效果 

根据前述的本发明，在诸如H.264或MVC编解码器的视频压缩标准的SEI消息中描述使能立体对信息，由此在显示装置中形成有效的立体图像。当解码器包括立体对设置信息时，显示装置能够容易地设置立体显示。 

附图说明

通过参考附图详细描述本发明的示范实施例，本发明的上述和其它方面将更加明了，其中： 

图1A是说明根据现有技术的在一维照相机阵列结构中的普通MVC标准的多视角图像序列的图； 

图1B是说明根据现有技术的在二维(2D)照相机阵列结构中的普通MVC标准的多视角图像序列的图； 

图1C是说明根据现有技术的在交叉类型照相机阵列结构中的普通MVC标准的多视角图像序列的图； 

图2A和图2B是说明根据现有技术的当由2D平行照相机视角形成立体图像时通过选择两个视角获得的立体效果的图； 

图3是根据本发明的示范实施例的用于编码多视角图像的装置的框图； 

图4是根据本发明的示范实施例的用于解码多视角图像的装置的框图； 

图5是说明根据本发明的示范实施例的编码多视角图像的方法的流程图； 

图6是说明根据本发明的示范实施例的产生图5所示的补充增强信息 (SEI)消息的方法的流程图； 

图7是说明根据本发明的示范实施例的普通网络抽象层(NAL)单元的句法的图； 

图8是说明根据本发明的示范实施例的图7所示的NAL单元的类型的图； 

图9是说明根据本发明的示范实施例的经常使用的SEI消息句法的图； 

图10是说明根据本发明的示范实施例的由编码多视角图像的装置发送的比特流的结构的图； 

图11A是说明根据本发明的示范实施例的用于设置立体对图像的SEI消息句法的图； 

图11B是说明根据本发明的示范实施例的用于设置立体对图像的SEI消息语义信息的图； 

图12A是说明根据本发明的示范实施例的使能立体对图像表格的图； 

图12B是说明4×2照相机阵列结构的示例的图；