[发明专利]用于发送和接收包括相机镜头信息的360度视频的方法及其装置

说明书

根据本发明的一种由接收360度视频的装置处理360度图像数据的方法包括以下步骤：接收360度图像数据；从所述360度图像数据获得与编码后图片相关的信息和元数据，其中，所述元数据包括相机镜头信息；基于与所述编码后图片相关的信息来对包括目标圆形区域的图片进行解码；以及基于所述相机镜头信息处理所述目标圆形区域来渲染所述目标圆形区域。

技术领域

本公开涉及360度视频，并且更具体地，涉及用于用于发送和接收包括相机镜头信息的3DoF+内容的360度视频的方法及其装置。

背景技术

虚拟现实(VR)系统允许用户体验电子投影环境。用于提供VR内容的系统可以被进一步改善，以提供较高质量的图像和立体声。VR系统可以允许用户交互性消费VR内容。

3DoF+(三个自由度+)内容通过提供根据用户的位置间移动而新创建的3DoF或360度视频，允许用户通过多个视点的360度视频而具有更多样的感官体验。

发明内容

技术问题

本公开的目的是提供用于增加提供VR系统的VR视频数据发送的效率的方法和装置。

本公开的另一目的是提供用于发送关于VR视频数据的VR视频数据和元数据的方法和装置。

本公开的另一方面是提供用于发送VR视频数据和关于VR视频数据的相机镜头信息的元数据的方法和装置。

本公开的另一目的是提供用于增加提供3DoF+系统的360度视频数据发送的效率的方法和装置。

本公开的另一目的是提供用于发送与用于提供3DoF+系统的视点/头部位置/眼睛视线的位置和/或角度有关的元数据的方法和装置。

本公开的另一目的是提供基于与变形校正相关的信息通过反映镜头的特性来校正变形的方法和装置。

本公开的另一目的是提供用于基于指示径向变形类型的信息通过反映镜头的特性来校正变形的方法和装置。

技术方案

在本公开的一个方面，本文中提供了一种通过360度视频发送装置处理360度图像数据的方法。该方法可以包括以下步骤：获取包括由具有至少一个镜头的相机获取的360度图像的目标圆形区域；将所述目标圆形区域映射到图片；对映射到所述目标圆形区域的所述图片进行编码，生成针对所述360度图像的元数据；以及处理编码后图片和所述元数据进行存储或发送，其中，所述元数据可以包含相机镜头信息。

在本公开的另一方面，本文中提供了一种用于处理360度视频数据的360度视频发送设备。该360度视频发送设备可以包括：数据输入单元，该数据输入单元被配置为获取包括由具有至少一个镜头的相机获取的360度图像的目标圆形区域；投影处理器，该投影处理器被配置为将所述目标圆形区域映射到图片；数据编码器，该数据编码器对映射到所述目标圆形区域的所述图片进行编码；元数据处理器，该元数据处理器被配置为生成所述360度图像的元数据；以及发送处理器，该发送处理器处理编码后图片和所述元数据以便进行存储或发送，其中，所述元数据可以包含相机镜头信息。

在本公开的另一方面，本文中提供了一种通过360度视频接收设备处理360度图像数据的方法。该设备可以包括：接收360度图像数据；从所述360度图像数据获取关于编码后图片的信息和元数据，所述元数据包含相机镜头信息；基于关于所述编码后图片的信息来解码包括目标圆形区域的图片；以及基于所述相机镜头信息来处理和渲染所述目标圆形区域。