[发明专利]一种谱音同步方法及终端在审
申请号: | 202111259601.0 | 申请日: | 2021-10-28 |
公开(公告)号: | CN113870820A | 公开(公告)日: | 2021-12-31 |
发明(设计)人: | 蔡智力;陈勇;苏财德;欧继福 | 申请(专利权)人: | 福建星网视易信息系统有限公司 |
主分类号: | G10H1/00 | 分类号: | G10H1/00 |
代理公司: | 福州市博深专利事务所(普通合伙) 35214 | 代理人: | 颜丽蓉 |
地址: | 350002 福建省福州市仓山区*** | 国省代码: | 福建;35 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 同步 方法 终端 | ||
1.一种谱音同步方法,其特征在于,包括步骤:
S1、根据待播放音频确定所述待播放音频的演唱歌词中每个字的第一起止时间;
S2、获取与所述待播放的音频对应的曲谱文件,根据所述曲谱文件和所述第一起止时间确定与所述曲谱文件对应的演唱歌词中每个字的第二起止时间;
S3、根据所述第二起止时间确定所述曲谱文件中对应音符的起止时间。
2.根据权利要求1所述的一种谱音同步方法,其特征在于,所述S1还包括:
根据待播放音频确定所述待播放音频的纯音符部分中每个音符的第三起止时间;
所述S3还包括:
根据所述曲谱文件和所述第三起止时间确定与所述曲谱文件对应的的纯音符部分中每个音符的第四起止时间。
3.根据权利要求1或2所述的一种谱音同步方法,其特征在于,所述根据所述曲谱文件和所述第一起止时间确定与所述曲谱文件对应的演唱歌词中每个字的第二起止时间包括:
根据所述曲谱文件中预设的速度对所述曲谱文件对应的演唱歌词按照时间先后顺序进行展开;
根据所述待播放音频的演唱歌词中每个字的第一起止时间调整所述按照时间先后顺序展开的曲谱文件对应的演唱歌词,得到所述曲谱文件对应的演唱歌词中每个字的第二起止时间。
4.根据权利要求2所述的一种谱音同步方法,其特征在于,所述S3中在确定所述曲谱文件中每个音符的起止时间之前还包括:
根据所述待播放音频对目标起止时间进行校正,所述目标起止时间包括所述第二起止时间、所述第四起止时间及由第二起止时间确定的对应音符的起止时间中的至少一个。
5.根据权利要求4所述的一种谱音同步方法,其特征在于,所述根据所述待播放音频对目标起止时间进行校正包括:
将所述待播放音频转换成时域上的波形;
根据所述波形确定所述待播放音频的每个目标对象的起始点和终止点,当所述目标起止时间为第二起止时间时,所述目标对象为所述演唱歌词中的字,当所述目标起止时间为第四起止时间时,所述目标对象为所述纯音符部分中的音符;当所述目标起止时间为由第二起止时间确定的对应音符的起止时间时,所述目标对象为由第二起止时间确定的对应音符;
根据所述每个目标对象的起始点和终止点对所述每个目标对象对应的所述目标起止时间进行校正。
6.根据权利要求5所述的一种谱音同步方法,其特征在于,所述根据所述波形确定所述待播放音频的每个目标对象的起始点和终止点包括:
按照时间顺序遍历所述波形中的每个时间点,对于遍历到的时间点:
判断从所述时间点开始的第一预设时间内所述波形的幅度是否增大到所述波形的最大幅度的第一预设比例以上,若是,则所述时间点为一个目标对象的起始点;
若否,判断从所述时间点开始的第二预设时间内所述波形的幅度是否减小到所述波形的最大幅度的第二预设比例以下,若是,则所述时间点为一个目标对象的终止点;
否则,继续遍历所述波形中的下一个时间点直至遍历完所述波形中的每个时间点;
根据遍历完成后确定的所有目标对象的起始点和终止点确定所述待播放音频的每个目标对象的起始点和终止点。
7.根据权利要求4所述的一种谱音同步方法,其特征在于,所述根据所述待播放音频对目标起止时间进行校正包括:
播放所述待播放的音频,对所述待播放音频进行语音识别或音调识别,确定所述待播放音频的演唱歌词或演奏音乐中每个目标对象的起始点和终止点,当所述目标起止时间为第二起止时间时,所述目标对象为所述演唱歌词中的字,当所述目标起止时间为第四起止时间时,所述目标对象为所述纯音符部分中的音符;当所述目标起止时间为由第二起止时间确定的对应音符的起止时间时,所述目标对象为由第二起止时间确定的对应音符;
根据所述每个目标对象的起始点和终止点对每个目标对象对应的目标起止时间进行校正。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于福建星网视易信息系统有限公司,未经福建星网视易信息系统有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111259601.0/1.html,转载请声明来源钻瓜专利网。