[发明专利]视频编码装置、视频编码方法、视频再现装置、视频再现方法、视频记录介质以及视频数据流

说明书

技术领域

本发明涉及显示立体视频的视频再现装置和方法以及生成立体视频的视频编码装置和编码方法，并且涉及保持视频编码数据的视频记录介质和视频数据流。

背景技术

显示立体视频(三维视频)的视频再现装置有几种方式已得到实用化。最普遍的方式是这样的方式：显示左右两眼用各自不同的视频而用各个眼睛观察，通过对该左右两眼用的视频赋予与人观察实际立体时同等的视差来使立体视频视觉化。

在立体显示实拍视频时，在摄影时使用2台摄像机，使用在水平方向上隔开与两眼间隔相当的距离而配置的摄像机同时拍摄。然后当再现时，显示成在左眼仅看到由左眼用的摄像机拍摄到的视频，在右眼仅看到由右眼用的摄像机拍摄到的视频，可用两眼感知视差，从而识别为立体视频。以往，针对用于观察单眼各自专用的视频的方式、提高该视频的分辨率来观察的方式、削减表现该视频的数据量的方式等，公开了各种技术。

将立体视频收录在以DVD或BD为代表的视频内容提供用的介质内的需要增高起来。在这些介质中，除了成为内容的主要部分的电影等的视频以外，还可将显示字幕的副图像、或者根据用户的设备操作显示选项或样本、指导等的图形进行重叠显示。这些附加的视频信息也成为突显作为主要部分的视频来提高内容的价值的重要构成要素。以往，由于视频是平面视频(二维视频)，因而重叠在其上的副图像、图形等的附加的视频信息也是平面视频，在重叠显示时，适当设定透过度来表示配置的前后关系，形成在视觉上印象深刻的表现。

在视频内容为立体视频的情况下，附加的视频信息在平面视频的状态下表现效果受到限制，因而要求副图像、图形等的附加的视频信息也能进行深度方向的表现。

以往，当在立体视频上重叠了平面字幕时，包含视差的立体视频被显示成产生远近感，而字幕被显示成在无限远，或者与字幕总是显示在图像近前的平面显示不同而显示在远景，因而存在用户具有不协调感的问题。对此，公开了这样的技术：使字幕的数据具有表示深度方向的显示位置的参数，通过在重叠于立体视频上时对字幕进行变形处理并进行合成，将字幕显示在适当位置(例如，参照专利文献1)。

专利文献1：日本特开2004-274125号公报

在现有技术中，尽管能将字幕的显示位置设定在视频近前的适当位置，然而只限于这一点。并且，设定能使字幕自身从近前向内倾斜来配置的深度方向的显示位置的技术未作公开，作为立体视频的表现法缺乏自由度。

发明内容

本发明鉴于这样的现状，目的是提供一种显示左右两眼用各自不同的视频来使立体视频视觉化的方式，在该方式中，对于重叠在立体视频上的副图像、图形等的附加的视频信息，也能进行深度方向的表现，从而能进行立体观察。

并且，目的是削减用于对此时的副图像、图形等的附加的视频信息进行可立体观察的表现的数据量。

而且，目的是在视频再现装置中，简化在实现副图像、图形等的视频信息的立体表现时的运算处理。同时，目的还在于，通过节约视频再现装置要求的运算处理性能来降低成本，以及提高在给定的运算处理性能下进行立体显示的视频信息的更新速度。

本发明的视频编码装置，该视频编码装置生成由视频再现装置再现的视频数据，该视频再现装置通过显示左右两眼用各自不同的视频来使立体视频视觉化，其特征在于，该视频编码装置具有：

视频编码单元，其对由在水平方向上隔开与两眼间隔相当的间隔而配置的第1视点和第2视点进行拍摄的摄像机输出的视频信号进行编码，生成表示构成立体视频的显示视频的视频编码数据流；

副视频编码单元，其对分别重叠显示在构成所述立体视频的第1视点的显示视频和第2视点的显示视频上的第1视点的显示副视频的数据和第2视点的显示副视频的数据进行编码，生成副视频编码数据流；以及

流复用单元，其对由所述视频编码单元生成的视频编码数据流、和由副视频编码单元生成的副视频编码数据流进行复用，

在所述副视频编码单元中，编码成能对所述第1视点的显示副视频内包含的1个以上的对象的数据独立地进行解码，并且，

通过将所述第2视点的显示副视频内包含的所述1个以上的对象，相对于作为所述第1视点的显示副视频而显示的各自对应的对象，进行水平方向的移动和伸缩的至少一方并进行显示，来表现深度，

作为所述第2视点的显示副视频的数据，生成针对所述对象的各方表示左端的移动宽度和右端的移动宽度的数据。

并且，本发明的视频再现装置，该视频再现装置对编码后的包含副视频的立体视频的数据进行解码，通过显示左右两眼用各自不同的视频来使立体视频视觉化，其特征在于，