[发明专利]用于生成且编码全向内容视频的方法及设备

权利要求书

1.一种视频处理方法，包括：

接收对应于球体的全向内容；

根据该全向内容和金字塔投影布局生成基于投影的帧，其中该基于投影的帧具有由包装在该金字塔投影布局内的基底投影面和多个侧向投影面表现的360度内容，并且该基底投影面和该侧向投影面至少根据在金字塔和该球体之间的投影关系来获得；以及

透过视频编码器编码该基于投影的帧，以便生成比特位流的一部分，

其中根据该全向内容和该金字塔投影布局生成该基于投影的帧包括：

将该球体的全向内容映射到该金字塔的基底和多个侧向面上，以便分别生成第一投影面和多个第二投影面；

从该第一投影面衍生出该基底投影面；以及

从该第二投影面分别衍生出该侧向投影面，其中各个侧向投影面透过对相应的第二投影面在其高度方向上进行重新取样而衍生出来，

其中对相应的第二投影面进行重新取样包括透过非均匀映射对相应的第二投影面进行重新取样，其中该相应的第二投影面具有第一源区域和第二源区域，所述的各个侧向投影面具有第一经重新取样的区域和第二经重新取样的区域，该第一经重新取样的区域透过用第一取样密度对该第一源区域进行重新取样而衍生出来，并且该第二经重新取样的区域透过用不同于该第一取样密度的第二取样密度对该第二源区域进行重新取样而衍生出来。

2.根据权利要求1所述的视频处理方法，其特征在于，该球体全部位于该金字塔内部。

3.根据权利要求2所述的视频处理方法，其特征在于，该球体是该金字塔的内切球体。

4.根据权利要求1所述的视频处理方法，其特征在于，该金字塔全部位于该球体内部。

5.根据权利要求4所述的视频处理方法，其特征在于，该球体是该金字塔的外接球体。

6.根据权利要求4所述的视频处理方法，其特征在于，该球体接触该金字塔的全部顶点，除了该金字塔的尖端。

7.根据权利要求6所述的视频处理方法，其特征在于，该金字塔的在该金字塔的尖端和该金字塔的基底之间的高度等于或小于该基底的边长。

8.根据权利要求1所述的视频处理方法，其特征在于，该第一投影面对应于用户的视口，该第一源区域更靠近该用户的视口的中心，并且该第一取样密度高于该第二取样密度。

9.根据权利要求1所述的视频处理方法，其特征在于，该金字塔投影布局的形状是正方形，该基底投影面的形状是正方形，各个侧向投影面的形状是直角三角形，该侧向投影面包括第一侧向投影面、第二侧向投影面、第三侧向投影面和第四侧向投影面，该第一侧向投影面的斜边与该基底投影面的第一边连接，该第二侧向投影面的斜边与该基底投影面的第二边连接，该第三侧向投影面的斜边与该基底投影面的第三边连接，并且该第四侧向投影面的斜边与该基底投影面的第四边连接。

10.根据权利要求9所述的视频处理方法，其特征在于，在该第一侧向投影面的斜边和该基底投影面的第一边之间具有图像连续性边界，在该第二侧向投影面的斜边和该基底投影面的第二边之间具有图像连续性边界，在该第三侧向投影面的斜边和该基底投影面的第三边之间具有图像连续性边界，并且在该第四侧向投影面的斜边和该基底投影面的第四边之间具有图像连续性边界。

11.根据权利要求1所述的视频处理方法，其特征在于，该金字塔投影布局的形状是矩形，该基底投影面的形状是正方形，各个侧向投影面的形状是直角三角形，该侧向投影面包括第一侧向投影面、第二侧向投影面、第三侧向投影面和第四侧向投影面，该第一侧向投影面的斜边与该基底投影面的一个边连接，该第一侧向投影面的一个直角边与该第二侧向投影面的一个直角边连接，该第一侧向投影面的另一直角边与该第三侧向投影面的一个直角边连接，该第四侧向投影面的一个直角边与该第二侧向投影面的另一直角边连接，并且该第四侧向投影面的另一直角边与该第三侧向投影面的另一直角边连接。