[发明专利]基于演唱音频评分的多媒体文件播放方法和装置

说明书

为实现更灵活、用户体验更佳的多媒体互动，发明人提供了一种基于演唱音频评分的多媒体文件播放方法，包括步骤：对第一视频文件进行分段，第一视频文件包含第一视频信息与第二音频信息；播放第一视频文件；获取演唱音频信号段落并对所述演唱音频信号段落进行评分，所述演唱音频信号段落与第一视频文件分段后得到的各段落在时间上相对应；根据评分结果在预设的视频库中选择一视频文件作为第二视频文件，在播放第一视频文件中的下一段落时，播放第二视频文件。发明人同时披露了实现上述方法的装置，可基于用户的演唱情况选择以及更改显示模块中的背景视频内容，以此提升演唱过程的互动娱乐性，提供用户以更有趣的演唱互动体验。

技术领域

本发明涉及多媒体技术领域，特别涉及一种基于演唱音频评分的多媒体文件播放方法和装置。

背景技术

在以KTV、家庭演唱视听系统等为典型的应用场景，现有的实时演唱打分系统一般由音频采集模块实现实时采集演唱录音，然后通过音频分析、对比标准演唱信息，确定演唱正确与否，并依此打分，给出演唱得分，显示在显示模块上。同时，也会在显示模块上展示当前歌曲歌词、视频背景、五线谱标记的歌曲旋律等交互信息。然而，随着用户对用户体验提升的需求日渐增加，现有技术逐渐显露出如下不足：第一，现有的演唱系统，显示模块上的背景视频与用户当前演唱情况无关，也就是占据显示模块较大面积的背景视频对于人机交互几乎没有贡献；第二，现有的演唱系统，在显示模块上的交互大多采用贴图、动画的方式展现交互信息，例如，在演唱过程中只能发送掌声、口哨声、鬼脸等音频或图片到演唱显示屏上，系统资源占用高，表现方式单一，不够灵活。

发明内容

为此，需要提供一种基于演唱音频评分的多媒体文件播放方法和装置。

为实现上述目的，发明人提供了一种基于演唱音频评分的多媒体文件播放方法，包括如下步骤：

对第一视频文件进行分段，所述第一视频文件为歌曲视频文件，包含第一视频信息与第一音频信息；

播放第一视频文件；

获取演唱音频信号段落，并对所述演唱音频信号段落进行评分，所述演唱音频信号段落与第一视频文件分段后得到的各段落在时间上相对应；

根据评分结果，在预设的视频库中选择一视频文件作为第二视频文件，在播放第一视频文件中的下一段落时，播放第二视频文件，所述第二视频文件中包含第二视频信息。

进一步地，所述的基于演唱音频评分的多媒体文件播放方法中，对第一视频文件进行分段的方式包括预设分段方式或动态分段方式；

所述预设分段方式的分段在播放第一视频文件之前进行；

所述动态分段方式的分段在播放第一视频文件期间进行。

进一步地，所述的基于演唱音频评分的多媒体文件播放方法中，所述预设分段方式包括：按歌词句间时长分段、按主歌副歌分段、按歌词句数分段或按时长分段。

进一步地，所述的基于演唱音频评分的多媒体文件播放方法中，所述动态分段方式包括以下步骤：

判断当前段是否结束，所述判断当前段是否结束的方法具体包括：以相邻两句演唱得分的句间分数差为依据判断当前段是否结束；以相邻句子演唱得分的分数递增或递减为依据判断当前段是否结束；或以当前段之前的部分段落分数或全部段落分数的数值为依据判断当前段是否结束；

当判定当前段结束时，将当前段的结束时间点与上一段的结束时间点之间的部分划分为一个段落。

进一步地，所述的基于演唱音频评分的多媒体文件播放方法中，进行评分的方式包括：

基于音准的评分方式、基于声纹相似度的评分方式，或基于吐字清晰度的评分方式。