[发明专利]一种基于用户视场的全景视频编码优化方法

权利要求书

1.一种基于用户视场的全景视频编码优化方法，其特征在于，包括如下步骤：

(1)获取预测的FoV模式FoV(μ_i,μ_j)；

(2)根据FoV模式FoV(μ_i,μ_j)生成当前帧中视场FoV(i,j)对应的二维高斯分布概率；具体包括如下步骤：

(21)N×M种FoV模式使用其视场中心平铺块对应概率来表征；

(22)计算tile(i,j)的累计观看概率，其中tile(i,j)会处于n×m个相邻的FoV模式中，若将当前FoV向下相隔v个tile，向右相隔h个tile对应的FoV模式记为FoV(i',j')，以下分三种情况讨论FoV(i',j')的视点中心；

(23)第一种情况FoV(i',j')没有超出边界；计算式如下式：

i'＝i+v；j'＝j+h,当0≤i+vM且0≤j+hN；

(24)第二种情况FoV(i',j')只跨越了左/右边界；计算式如下式：

i'＝i+v；j'＝(j+h)modN,当(j+h0或j+h≥N)且0≤i+vM；

(25)第三种情况FoV(i',j')跨越了上/下边界；计算式如下式：

i'＝M-1-(i+v)modM；j'＝j+N/2,当i+v0或i+v≥M；

(26)通过得到的二维高斯分布概率和tile被观测到的概率和来计算tile(i,j)的被观测的概率；计算式如下式：

其中m、n表示FoV中包含tile的个数为m行n列；

(3)获得tile(i,j)处于n×m个FoV模式的累计概率即该tile被观测的概率；将视频帧划分为N×M个平铺块，平铺块表征为tile(i,j)，其中i、j分别为平铺块的行、列索引号，i∈{0,1,…,M-1}，j∈{0,1,…,N-1})；

(4)使用等矩形投影ERP格式下投影变换公式计算tile(i,j)的投影权重；计算式为下式：

其中，H为每列中的包含的像素数；

(5)根据最终得到的观测概率和投影权重计算λ和QP值并进行修正；QP调整式使用下式确定：

其中，QP_i,j为修正后的tile(i,j)的QP值，QP_base为全局拉格朗日乘子对应的QP值；

(6)利用最终得到的QP值进行编码，编码后根据获得的tile级别量化参数选择方案，进行编码。

2.如权利要求1所述的基于用户视场的全景视频编码优化方法，其特征在于，步骤(1)中，获取预测的FoV模式FoV(μ_i,μ_j)具体包括如下步骤：

(11)获取预测的FoV模式FoV(μ_i,μ_j)；

(12)计算当预测FoV模式为FoV(μ_i,μ_j)时，其他视场FoV(i，j)为视点的概率；