[发明专利]自适应时域变分辨率编解码方法、装置、终端及存储介质

权利要求书

1.一种自适应时域变分辨率编解码方法，其特征在于，所述方法包括：

获取输入视频，将所述输入视频分为若干等长的子序列；

获取各所述子序列分别对应的场景运动特征，根据所述场景运动特征从各所述子序列中确定若干目标子序列；

对各所述目标子序列在时域上进行下采样操作，得到各所述目标子序列分别对应的降帧率序列；

对各所述目标子序列的降帧率序列进行编解码操作，得到各所述目标子序列分别对应的解码序列；

对各所述解码序列在时域上进行上采样操作，得到各所述目标子序列分别对应的编解码序列。

2.根据权利要求1所述的自适应时域变分辨率编解码方法，其特征在于，每一所述子序列的长度与时域基本单元的长度相等，所述时域基本单元的长度为2s。

3.根据权利要求1所述的自适应时域变分辨率编解码方法，其特征在于，所述下采样操作为帧率两倍下采样。

4.根据权利要求1所述的自适应时域变分辨率编解码方法，其特征在于，所述获取各所述子序列分别对应的场景运动特征，根据所述场景运动特征从各所述子序列中确定若干目标子序列，包括：

对每一所述子序列进行所述下采样操作，得到该子序列对应的降帧率序列；

通过帧复制操作对该子序列的降帧率序列进行帧率恢复，得到该子序列的恢复序列；

获取该子序列和该子序列的恢复序列的相似度和预设的相似阈值，当所述相似度值高于所述相似阈值时，判断所述场景运动特征为运动平缓；

将所述场景运动特征为运动平缓的所述子序列作为所述目标子序列。

5.根据权利要求1所述的自适应时域变分辨率编解码方法，其特征在于，所述上采样操作为在每一所述解码序列的相邻两个视频帧之间生成内插帧，所述内插帧的生成方法包括：

获取第一视频帧和第二视频帧分别对应的时空域信息；

根据两个所述时空域信息进行正向和反向的预测操作，得到两次所述预测操作分别对应的内插参考帧，其中，正向的预测起点为所述第一视频帧，预测终点为所述第二视频帧；反向的所述预测起点为所述第二视频帧，所述预测终点为所述第一视频帧；

将两张所述内插参考帧、所述第一视频帧以及所述第二视频帧进行融合，得到所述第一视频帧和所述第二视频帧对应的所述内插帧。

6.根据权利要求5所述的自适应时域变分辨率编解码方法，其特征在于，所述时空域信息包括空域信息和时域特征，所述预测操作为：

根据所述预测起点和所述预测终点分别对应的所述空域信息，确定所述预测起点和所述预测终点分别对应的注意力权重；

根据所述预测起点和所述预测终点分别对应的所述时域特征和所述注意力权重，确定融合时域特征；

根据所述预测终点的所述时域特征和所述融合时域特征，确定增强型时域特征；

根据所述预测终点的所述空域信息和所述增强型时域特征，确定所述内插参考帧。

7.根据权利要求6所述的自适应时域变分辨率编解码方法，其特征在于，所述根据所述预测起点和所述预测终点分别对应的所述空域信息，确定所述预测起点和所述预测终点分别对应的注意力权重，包括：

根据所述预测终点的所述空域信息，获取所述预测终点的空域特征；

根据所述预测起点的所述空域信息和所述空域特征进行矩阵逐元素相乘操作，得到所述预测起点的注意力分数；

根据所述预测终点的所述空域信息和所述空域特征进行矩阵逐元素相乘操作，得到所述预测终点的注意力分数；

根据所述预测起点和所述预测终点的所述注意力分数，确定所述预测起点和所述预测终点分别对应的所述注意力权重。

8.根据权利要求6所述的自适应时域变分辨率编解码方法，其特征在于，所述根据所述预测起点和所述预测终点分别对应的所述时域特征和所述注意力权重，确定融合时域特征，包括：

根据所述预测起点和所述预测终点分别对应的所述时域特征和所述注意力权重进行加权求和，得到所述融合时域特征。