[发明专利]一种多媒体数字融合方法和装置

说明书

本公开提供了一种多媒体数字融合方法，获取待融合的多媒体数据集；根据预设策略对多媒体数据集的每个音视频数据进行分析，并通过生成的分析结果经过预设分类模型确定多媒体数据集的分类信息；提取多媒体数据集同一分类信息下的至少两个待处理的音视频数据帧序列；将至少两个待处理的音视频数据帧序列定义为融合帧，其它音视频数据帧序列定义为标定帧；将融合帧以及标定帧进行融合，完成多媒体数据集的融合操作。该方法能够精准，快捷地完成多媒体数字融合操作，具有融合操作的易用性与实用性。本公开还提出了一种多媒体数字融合装置。

技术领域

本公开涉及多媒体与图像处理技术领域，具体而言，涉及一种多媒体数字融合方法和装置。

背景技术

随着科技技术的发展，多媒体技术在人们的日常生活中有着不可替代的地位。在播放音频时展示对应的文字信息与图片信息，可以让音频的展示更富有表达力。但是，目前音视频融合手段都比较单一，无法更加精准、快捷地进行多方面的表达，且音视频的融合度也存在精度较低的情况，不具有易用性与实用性，如何使得融合底层更具有代表性的视觉、听觉、语义特征，是需要解决的问题。

发明内容

为了解决现有技术中的技术问题，本公开实施例提供了一种多媒体数字融合方法和装置，能够精准，快捷地完成多媒体数字融合操作，具有融合操作的易用性与实用性。

第一方面，本公开实施例提供了一种多媒体数字融合方法，获取待融合的多媒体数据集；根据预设策略对所述多媒体数据集的每个音视频数据进行分析，并通过生成的分析结果经过预设分类模型确定所述多媒体数据集的分类信息；提取所述多媒体数据集同一分类信息下的至少两个待处理的音视频数据帧序列；将所述至少两个待处理的音视频数据帧序列定义为融合帧，其它音视频数据帧序列定义为标定帧；将所述融合帧以及所述标定帧进行融合，完成所述多媒体数据集的融合操作。

在其中一个实施例中，所述根据预设策略对所述多媒体数据集的每个音视频数据进行分析，并通过生成的分析结果经过预设分类模型确定所述多媒体数据集的分类信息包括：根据预设策略从预设多媒体数据库中查找所述多媒体数据集的每个音视频数据的类别，并统计所述音视频数据的类别出现的频率；根据所述频率确定所述多媒体数据集的分类信息。

在其中一个实施例中，所述根据预设策略对所述多媒体数据集的每个音视频数据进行分析，并通过生成的分析结果经过预设分类模型确定所述多媒体数据集的分类信息之前，还包括：获取多种类型、各类型的多个类别和每个类别对应的多张图片样本作为训练数据集；根据所述训练数据集对预设的分类模型进行训练，生成所述预设分类模型。

在其中一个实施例中，还包括：确定所述融合帧与所述标定帧之间的属性关系。

在其中一个实施例中，所述属性关系包括亮度关系与色度关系。

在其中一个实施例中，还包括：针对融合帧，基于确定的所述融合帧与所述标定帧之间的属性关系，对所述融合帧的属性进行自适应调整。

第二方面，本公开实施例提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现上述的方法的步骤。

第三方面，本公开实施例提供了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现上述的方法的步骤。

第四方面，本公开实施例提供了一种多媒体数字融合装置，所述装置包括：获取模块，用于获取待融合的多媒体数据集；分析与确定模块，用于根据预设策略对所述多媒体数据集的每个音视频数据进行分析，并通过生成的分析结果经过预设分类模型确定所述多媒体数据集的分类信息；提取模块，用于提取所述多媒体数据集同一分类信息下的至少两个待处理的音视频数据帧序列；定义模块，用于将所述至少两个待处理的音视频数据帧序列定义为融合帧，其它音视频数据帧序列定义为标定帧；融合模块，用于将所述融合帧以及所述标定帧进行融合，完成所述多媒体数据集的融合操作。