[发明专利]部分视频解码方法、设备和系统

说明书

从诸如HEVC比特流的第一视频流中解码表示部分视频图像的编码视频数据。第一视频流包括分成独立可解码切片的空间阵列的视频图像。第一视频流包括网络抽象层单元，每个网络抽象层单元包含切片中的相应切片的视频内容数据，所述视频内容数据的前面是报头，所述报头包括与和第一视频流相关的切片中的相应切片相关的参数。使用先前准备的信息，诸如关于不同部分图像大小（不同图片大小）的网络抽象层单元或网络抽象层单元的多个不同版本中的参数的位置的元数据。元数据可以被用于部分重写切片的子阵列的网络抽象层单元，网络抽象层单元在基于元数据选择的位置处被重写，以使网络抽象层单元仅对于切片的子阵列与编码视频数据的第二视频流一致。可以从多个不同版本针对切片的子阵列选择网络抽象层单元的版本。随后，通过解码来自重写的网络抽象层单元的编码视频数据来生成部分视频图像。

技术领域

本发明涉及视频信息传输方法和系统、视频解码器、视频编码器和视频编码和解码的方法。

背景技术

WO2015197818公开了使用HEVC图块以将来自用户可选空间视口（viewport）的视频数据渲染成更大的视频图像，诸如全景视频图像，例如用于在头戴式设备上显示。HEVC标准（高效率视频编码）提供了图块和切片的使用，以促进使用解码器系统中的多核处理器来解码视频数据。图块对应于视频图像的相应空间区域，对于所述视频图像，视频数据被独立编码。因此，在不同处理器核上运行的不同解码器单元可以被分配来解码不同图块（在HEVC术语中，解码图块的单元被称为“解码器”，但是如在本文中使用的那样，术语“解码器”也覆盖用于不同图块的多个HEVC解码器，以及解码多于一个图块的解码器）。HEVC编码视频的帧可以被划分成由图块组成的空间阵列，其中每个图块包含至少一个切片。

HEVC源设备可以经由网络提供HEVC比特流数据。HEVC源设备通常只不过是文件传输服务器。在目的地的请求下，HEVC源设备提供清单文件，该清单文件使得目的地能够生成灵活的请求来传输存储的HEVC编码比特流数据的部分。HEVC源设备不执行任何HEVC相关操作，而是简单地传输请求的部分，该请求的部分形成可解码的视频比特流，该视频比特流可以被任何标准兼容解码器来解码。

WO2015197818利用了图块可以允许随机访问视频帧的空间部分的事实。该文献公开了使用具有关于HEVC图块的子集的元数据的空间清单文件（SMF），其被用于从视口选择性地检索图块，并在解码器系统接收所请求的平铺视频数据之前配置解码器系统。

HEVC视频比特流数据的存储和网络传输涉及网络抽象层（NAL）。HEVC视频比特流数据以被称为NAL单元的分组来存储和传输。在传输具有视频比特流数据的NAL单元之前，使用其他NAL单元来传输适用于视频比特流数据的参数集。参数集包括图片参数集（PPS）、序列参数集（SPS）和视频参数集（VPS）。除了其他之外，参数集还定义了图片大小、图块集的尺寸和切片段地址。具有视频数据的每个NAL单元包含报头数据和净荷数据。根据HEVC标准定义，NAL单元的净荷数据可以包含视频数据，所述视频数据的前面是报头。然而，如本文中使用的那样，切片报头也将被称为NAL单元的报头数据。因此，报头数据是元数据，而不是视频数据。更重要的是，报头数据可以包括NAL单元报头和切片报头。报头数据或报头数据中的参数的至少部分通过可变长度代码来编码，使得报头长度可以因切片和帧而变化。具有视频比特流数据的NAL单元的报头直接或间接地指示适用于它们的参数集。参数集可以被用于初始化（配置）解码器。因此，参数集是由解码器使用的元数据。参数集可以作为HEVC比特流的部分被提供给解码器（例如，在HEVC的情况下，以非VCL NAL单元的形式）。替代的，一个或多个参数集可以在替代的比特流中提供，或者作为SEI消息提供，或者经由解码器的替代的接口提供。只要参数集在它所适用的视频数据之前被提供。因此，HEVC兼容的比特流可以只包含携带视频数据的NAL单元，而不包含参数集。在NAL单元内的切片报头中引用的图片参数集（PPS）（例如，通过图片参数集ID）又可以引用序列参数集（例如，图片参数集包括序列参数集ID），该序列参数集又可以引用适用于NAL单元的视频参数集。