[发明专利]视频帧对齐方法、装置、终端设备及计算机可读存储介质

说明书

本申请提供了一种视频帧对齐方法、装置、终端设备及计算机可读存储介质，所述方法包括：获取原始视频和所述原始视频的目标视频；计算所述目标视频中第一预设数量的相邻两视频帧之间的第一颜色直方图相似度；计算所述原始视频中第二预设数量的相邻两视频帧之间的第二颜色直方图相似度；根据所述第一颜色直方图相似度和所述第二颜色直方图相似度，将所述原始视频和所述目标视频对齐，得到对齐后的目标视频和对齐后的原始视频。本申请实施例通过使用颜色直方图作为相似度进行视频对齐，可以适应相同色彩，并且可以有平移、缩放、旋转不变性，提高了视频对齐时受损程度高的情形下的鲁棒性。

技术领域

本申请属于视频处理技术领域，尤其涉及一种视频帧对齐方法、装置、终端设备及计算机可读存储介质。

背景技术

近年来，随着人们对更高清的视频以及图片的需求逐渐提高，视频增强算法成为了很多应用以及产品的核心技术，比如视频网站的高清点播，老旧低分辨电影的修复，移动端或者电视端的低清视频超分等等。而且随着硬件成本的降低以及大量可用的数据，深度学习方法在视频增强领域占据越来越重要的地位，其需要大量的目标视频以及原始视频作为模型的训练输入。

视频质量的检测和评价技术是保障新一代网络服务质量的关键技术之一，可应用在无线通信系统的方案设计、视频压缩编码性能对比以及各类业务监控等诸多领域，将目标视频帧和原始视频帧对齐的研究也是视频质量评价关键的一步。

现有技术中有的将结构相似度SSIM和峰值信噪比PSNR进行相似度比较，以此作为对齐的依据，但对于某些受损较大的图像以及视频效果很差；有的利用音频特征去识别基准音频的时间戳，然而现实情况中，网络的视频往往是经过剪辑以及处理之后的，原有的时间戳已经被剪辑掉了，难以实现视频对齐。

发明内容

本申请实施例提供了一种视频帧对齐方法、装置、终端设备及计算机可读存储介质，可以有效降低了所占用的内存空间，提高鲁棒性。

第一方面，本申请实施例提供了一种视频帧对齐方法，包括：

获取原始视频和所述原始视频的目标视频；

计算所述目标视频中第一预设数量的相邻两视频帧之间的第一颜色直方图相似度；

计算所述原始视频中第二预设数量的相邻两视频帧之间的第二颜色直方图相似度；

根据所述第一颜色直方图相似度和所述第二颜色直方图相似度，将所述原始视频和所述目标视频对齐，得到对齐后的目标视频和对齐后的原始视频。

第二方面，本申请实施例提供了一种视频帧对齐装置，包括：

获取模块，用于获取原始视频和所述原始视频的目标视频；

第一计算模块，用于计算所述目标视频中第一预设数量的相邻两视频帧之间的第一颜色直方图相似度；

第二计算模块，用于计算所述原始视频中第二预设数量的相邻两视频帧之间的第二颜色直方图相似度；

对齐模块，用于根据所述第一颜色直方图相似度和所述第二颜色直方图相似度，将所述原始视频和所述目标视频对齐，得到对齐后的目标视频和对齐后的原始视频。

第三方面，本申请实施例提供了一种终端设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述第一方面中任一项的视频帧对齐方法的步骤。

第四方面，本申请实施例提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现上述第一方面中任一项所述的视频帧对齐方法的步骤。

第五方面，本申请实施例提供了一种计算机程序产品，当计算机程序产品在终端设备上运行时，使得终端设备执行上述第一方面中任一项所述的视频帧对齐方法的步骤。