[发明专利]一种基于歌词歌声对齐的唱歌评分方法在审
申请号: | 201910890520.7 | 申请日: | 2019-09-20 |
公开(公告)号: | CN110660383A | 公开(公告)日: | 2020-01-07 |
发明(设计)人: | 林伟伟;胡康立 | 申请(专利权)人: | 华南理工大学 |
主分类号: | G10L15/02 | 分类号: | G10L15/02;G10L15/26;G10L21/0208;G10L21/0272;G10L25/03;G10L25/69 |
代理公司: | 44245 广州市华学知识产权代理有限公司 | 代理人: | 陈宏升 |
地址: | 510640 广*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 歌声 基音频率 对齐 歌词 节奏 歌曲 伴奏 唱歌 标签信息 歌曲录制 评分结果 权值系数 时间计算 噪声去除 归一化 时长 句子 相加 噪声 分割 | ||
1.一种基于歌词歌声对齐的唱歌评分方法,其特征在于,包含以下顺序的步骤:
S1.录制歌曲;
S2.歌声伴奏分离、噪声去除;
S3.提取基音频率以及振幅;
S4.以句子为单位,歌词与歌声对齐;
S501.分割对齐后的歌声中每个字的基音频率;
S502.计算基音频率相似性得分ScoreP;
S6.根据用户歌声以及标准歌声的每一句时长以及每个字的起始结束时间计算歌曲的节奏得分ScoreR;
S701.归一化用户歌声和标准歌声的振幅;
S702.计算振幅相似性得分ScoreV;
S8.对基音频率得分、节奏得分、振幅得分乘以权值系数λi并相加,计算歌曲的综合得分Score。
2.根据权利要求1所述的基于歌词歌声对齐的唱歌评分方法,其特征在于,所述的录制歌曲是指在非专业录制环境下录制的歌曲音频,所述非专业录制环境包括日常环境、卡拉OK环境。
3.根据权利要求1所述的基于歌词歌声对齐的唱歌评分方法,其特征在于,所述步骤S2具体为:利用音源分离算法分离歌声与伴奏、对分离出来的歌声进行噪声去除处理。
4.根据权利要求1所述的基于歌词歌声对齐的唱歌评分方法,其特征在于,步骤S4中,所述的歌词歌声对齐是指以每一句歌词作为划分单位,利用自动语音识别技术将每一句歌词与对应的歌声音频对齐,并划分为歌声集合A={A1,A2,...,An},其中Ai表示第i句对齐歌词的歌声,1≤i≤n。
5.根据权利要求1所述的基于歌词歌声对齐的唱歌评分方法,其特征在于,步骤S501和步骤S502,具体为:
对于第i句对齐歌词的歌声Ai,识别每一个字发音区域,记录其在该句歌声中的起始时间以及结束时间,划分为基音频率集合Pi={Pi1,Pi2,...,Pim},Pij则表示为第i句歌词的第j个字;
计算第i句对齐歌词的歌声Ai的基音频率的相似度时,需要与标准歌声的基音频率进行对比匹配,记用户歌声基音频率集合为Pci={Pci1,Pci2,...,Pcim},标准歌声基音频率集合为Psi={Psi1,Psi2,...,Psim},在对比Pcij和Psij需要将两者起始时间统一在相同的起点,然后再利用特征相似性度量算法计算相似性;
以第i句歌词的第j个字Pij为评价单位,整首歌的基音频率得分是歌声中的字Pij的对应基音频率评价得分总和。
6.根据权利要求1所述的基于歌词歌声对齐的唱歌评分方法,其特征在于,步骤S6中,所述歌曲的节奏,其评价分为整体节奏评价以及局部节奏评价:整体节奏评价是以每一句对齐后的歌声为评价单位,该评价方法是对比用户歌声时长Tci和标准歌声时长Tsi的差异;而局部节奏评价则是以每一句对齐后的歌声中的每一个字为评价单位,该评价方法是对比用户歌声基音频率Pcij和标准歌声基音频率Psij起始、结束时间的差异;
以第i句对齐歌词的歌声Ai为评价单位,整首歌的整体节奏得分是对应每一句歌声节奏特征评分总和;
以第i句歌词的第j个字Pij为评价单位,整首歌的局部节奏得分是歌声中的字Pij的对应局部节奏得分总和。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华南理工大学,未经华南理工大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910890520.7/1.html,转载请声明来源钻瓜专利网。