[发明专利]一种短视频配乐质量客观评价方法

说明书

本发明是一种短视频配乐质量客观评价方法，该方法包括以下步骤：(一)视频配乐全局匹配度计算；(二)视频配乐局部匹配度计算；(三)视频配乐质量计算。本发明的优点：从短视频与背景音乐节奏匹配度的角度出发，为短视频的配乐质量评价提供了一种客观的计算方法，可以取代传统的基于人工评价的主观评价方法。

技术领域

本发明涉及的是一种短视频配乐质量客观评价方法，属于计算机多媒体(图像和视频)信息处理技术领域。

背景技术

短视频一般指在互联网上传播的、时长在5分钟以内的视频短片。近年来，随着移动互联网技术的快速发展和大屏幕智能手机的普及，短视频行业异军突起。根据CNNIC(中国互联网络信息中心)2019年8月发布的《第44次中国互联网络发展状况统计报告》，截至2019年6月，我国短视频用户规模为6.48亿，占网民整体的75.8％。短视频并非长视频的碎片版，它是一个全新的产品。与传统视频相比，短视频具有总体时长短、观看场景多样化、创作门槛低、内容多样化等特点。

对于短视频而言，大部分短视频的节奏和情绪都是由背景音乐来带动的，为短视频添加背景音乐是短视频制作过程的重要环节，除了人工选取背景音乐的方式外，近年来也有一些自动配乐的方法提出。然而，音乐的选择是一件很主观的事情，如何评价所选取的背景音乐是否适合短视频，目前尚没有能够定量评价的方法。

综上所述，现有技术的不足包括：

1)短视频并非长视频的碎片化，而是一种全新的产品形式。传统的用于长视频视频质量的评价方法无法直接应用到短视频领域；

2)对视频配乐质量的评价多以主观评价方法为主，缺乏客观的评价标准。

发明内容

本发明提出的是一种短视频配乐质量客观评价方法，其目的旨在填补现有技术存在的上述空白，从短视频与背景音乐节奏匹配度的角度出发，来评价短视频配乐质量。

本发明的技术解决方案：一种短视频配乐质量客观评价方法，该方法包括以下步骤：

(一)视频配乐全局匹配度计算：

计算视频整体的运动程度与背景音乐的节奏的匹配关系，视频运动高则配乐节奏较快，视频运动缓慢甚至静止则配乐节奏较慢，视频的运动程度由视频时间复杂度表示，音乐节奏由音乐的全局节拍数表示；

(二)视频配乐局部匹配度计算：

局部匹配度是一种细粒度的度量方法，考察视频的运动程度在时间上的分布，与背景音乐能量在时间上的分布之间的匹配程度，匹配度越高则配乐质量较高，匹配度越差则配乐质量较差；

(三)视频配乐质量计算：

最终的配乐质量由视频配乐全局匹配度和局部匹配度加权和求得。

优选的，所述的(一)视频配乐全局匹配度计算，包括：

(1)视频时间复杂度：

不同的视频画面的运动程度不同，有的视频较平缓、有的运动剧烈，视频在视觉上表现出的运动程度即视频的时间复杂度，由视频的时域信息TI计算，对于输入视频V_i，时间复杂度TI_i计算步骤如下：

①提取视频中的相邻两帧I_n和I_n-1，

②计算输入帧的灰度图：

I_g(x,y)＝0.3R(x,y)+0.59G(x,y)+0.11B(x,y)，其中R(x,y)、G(x,y)、 B(x,y)分别为输入图像对应像素的三个色度分量值，