[发明专利]基于帧特征的重复视频校验方法及装置

说明书

本公开涉及一种基于帧特征的重复视频校验方法、装置、设备、计算机程序产品和计算机可读存储介质，可应用于云技术、人工智能、区块链、智慧交通、辅助驾驶等各种场景。本公开的实施例所提供的方法以匹配的方式对视频进行校验，基于视频间帧特征的特征相似度确定原视频中的每个视频帧在待校验视频中的每个视频帧中的至少一个最优匹配帧，这种确定限定范围内相对最优匹配帧的方式不依赖于绝对的特征相似度，从而不依赖于限定的阈值，弱化了图像的绝对特征相似度在重复视频校验中的重要性，提高了校验方法的有效性和准确性。此外，所述方法通过识别所述最优视频帧的时序特征，大幅提升了重复视频校验的准确性。

技术领域

本公开涉及重复视频校验领域，更具体地，涉及一种重复视频校验方法、装置、设备、计算机程序产品和存储介质。

背景技术

在互联网时代，多媒体视频作为一个重要的数据载体，在信息传播中发挥着巨大的作用。重复视频检测，不仅可以减少冗余信息的传播，也在保护版权和防止不良视频传播中起到了作用，因此，重复视频检测广泛应用于各种视频平台的低质搬运识别、版权检测等业务场景。然而，信息膨胀以及视频检测方和视频搬运方之间存在的典型对抗关系给重复视频的检测带来了挑战。

由附图图1A、1B、1C的说明可知，一方面，视频搬运方以各种方式对视频进行编辑以防止被检测，视频检测方需要不断修正检测模型并且补充检测算法，例如，在通过将视频帧的图像相似度与固定阈值进行比较以判定视频是否重复的校验方案中，容易出现因视频搬运方的编辑刻意降低了图像相似度而导致校验有效性低的问题，另一方面，不同视频本身也可能存在画面构图相似度高的问题。因此，现有技术中的重复视频校验方案大多需要十分复杂的特征提取和特征匹配逻辑。

发明内容

为了解决上述问题，本公开通过在重复视频校验过程中基于帧特征借助相对最优的特征相似度进行校验。

本公开的实施例提供了涉及一种基于帧特征的重复视频校验方法、装置、设备、计算机程序产品和计算机可读存储介质。

本公开的实施例提供了一种基于帧特征的重复视频校验方法，所述方法包括：获取待校验的第一视频和第二视频，其中，第一视频可以为原视频，第二视频可以为待校验视频，反之亦然；以预定时间间隔对所述第一视频和第二视频进行抽帧，以得到第一视频的多个视频帧和第二视频的多个视频帧；对所述第一视频的多个视频帧和所述第二视频的多个视频帧中的每个视频帧，提取所述视频帧的帧特征；基于所述第一视频的各个视频帧的帧特征和所述第二视频的各个视频帧的帧特征，分别确定所述第一视频的各个视频帧与第二视频的各个视频帧之间的特征相似度；基于所述第一视频的各个视频帧与第二视频的各个视频帧之间的特征相似度，对于所述第一视频中的每个视频帧，确定所述视频帧在所述第二视频的多个视频帧中的至少一个最优匹配帧；以及基于所述第一视频中的各个视频帧所对应的最优匹配帧在所述第二视频中的位置，对所述第一视频和第二视频进行重复视频校验。

根据本公开的实施例，所述基于所述第一视频中的各个视频帧所对应的最优匹配帧在所述第二视频中的位置来对所述第一视频和第二视频进行重复视频校验包括：按照所述第一视频中的多个视频帧的时序，对所述第一视频中的多个视频帧所对应的最优匹配帧进行排序；基于每个最优匹配帧在所述第二视频帧中的位置，确定所述排序后的最优匹配帧是否存在线性时序关系；若存在线性时序关系，则将所述第一视频和第二视频判定为重复视频，若不存在线性时序关系，将所述第一视频和第二视频判定为不重复。

根据本公开的实施例，通过计算所述第一视频的各个帧与第二视频的各个帧之间的余弦相似度，来确定所述第一视频的各个帧与第二视频的各个帧之间的特征相似度。

根据本公开的实施例，对于所述第一视频中的每个视频帧，确定所述视频帧在所述第二视频的多个视频帧中的至少一个最优匹配帧，包括：在所述第二视频的多个视频帧中，确定与所述第一视频帧中的所述视频帧具有最高余弦相似度的至少一个视频帧，作为所述至少一个最优匹配帧。其中，“最高余弦相似度”包括最大值的余弦相似度、数值大小排前三的余弦相似度或由用户设定的数量的余弦相似度。