[发明专利]通过使用基于学习的运动分段的运动翘曲的视频压缩

权利要求书

1.一种装置，包括：

非暂时性存储器；和

处理器，所述处理器被配置成执行存储在所述非暂时性存储器中的指令，以用于：

对于视频序列中的帧组中的每个帧，使用第一分类器将所述帧分段成所述帧中的图像的纹理区、非纹理区、或纹理区和非纹理区两者，所述第一分类器使用第一机器学习过程来生成；

使用第二分类器将所述帧组的所述纹理区分段成纹理代码化区或非纹理代码化区，所述第二分类器使用跨所述帧组的运动，并且所述第二分类器使用第二机器学习过程来生成；以及

通过下述操作对所述视频序列中的所述帧组中的当前帧进行编码：

使用基于块的代码化技术对所述当前帧的所述非纹理代码化区的块进行编码；以及

使用除了所述基于块的代码化技术以外的技术对所述当前帧的所述纹理代码化区的块进行编码。

2.根据权利要求1所述的装置，其中，所述指令进一步包括用于下述的指令：

估计所述帧组中的相邻帧之间的光流；以及

为所述帧组定义运动隧道，所述运动隧道中的运动隧道包括来自所述视频序列中所述帧组的相邻帧的帧部分系列，其中，用于将所述纹理区分段的所述指令包括用于下述的指令：

对于包括纹理区的所述运动隧道中的运动隧道，使用所述第二分类器，使用所述光流将所述运动隧道分类成所述纹理代码化区或所述非纹理代码化区。

3.根据权利要求2所述的装置，其中，用于将所述运动隧道分类的所述指令包括用于下述的指令：

从所述运动隧道的所述帧部分系列中提取值；以及

使用所述值作为输入，将所述第二分类器应用于所述运动隧道，所述第二分类器具有输出值，所述输出值将所述运动隧道指配给所述纹理代码化区或所述非纹理代码化区。

4.根据权利要求1至3中的任一项所述的装置，其中，用于对所述当前帧进行编码的所述指令包括用于下述的指令：

使用所述基于块的代码化技术对所述当前帧的非纹理区的块进行编码。

5.根据权利要求1至4中的任一项所述的装置，其中：

所述指令进一步包括用于下述的指令：对所述纹理代码化区执行全局运动估计以获得单应性全局运动模型；以及

用于对所述纹理代码化区进行编码的所述指令包括用于下述的指令：使用所述单应性全局运动模型对所述纹理代码化区进行编码。

6.根据权利要求1至5中的任一项所述的装置，其中，用于将所述帧分段的所述指令包括用于下述的指令：对于所述帧的多个块，使用所述多个块中的块的像素值作为输入，将所述第一分类器应用于所述块，所述第一分类器具有输出值，所述输出值将所述块指配给所述纹理区或所述非纹理区。

7.根据权利要求6所述的装置，其中，从所述第一分类器输出的第一值将所述块指配给所述纹理区，并且从所述第一分类器输出的第二值将所述块指配给所述非纹理区。

8.根据权利要求1至7中的任一项所述的装置，其中：

所述帧组中的至少两个相邻帧中的每一个的所述纹理区包括第一纹理区和第二纹理区，

用于将所述帧分段的所述指令包括用于下述的指令：针对所述至少两个相邻帧中的每一个中的多个块：

使用来自所述块的像素值作为输入将所述第一分类器应用于所述块，所述第一分类器具有将所述块指配给所述第一纹理区的第一输出值、将所述块指配给第二纹理区的第二输出值或将所述块指配给所述非纹理区的第三输出值；以及

所述第一纹理区、所述第二纹理区和所述非纹理区是所述至少两个相邻帧中的每一个的相应帧的非重叠区。

9.根据权利要求1至8中的任一项所述的装置，其中，所述指令进一步包括用于下述的指令：

定义纹理区掩码，所述纹理区掩码指示所述纹理代码化区在所述视频序列中首次出现的所述帧组中的帧中的所述纹理代码化区的像素位置；以及

对所述纹理区掩码进行编码。