[发明专利]音频处理方法、装置、计算设备以及介质有效
申请号: | 202110524742.4 | 申请日: | 2021-05-13 |
公开(公告)号: | CN112992110B | 公开(公告)日: | 2021-08-10 |
发明(设计)人: | 陈梦;曹偲;朱一闻;郑博;李鹏;白杨;刘华平 | 申请(专利权)人: | 杭州网易云音乐科技有限公司 |
主分类号: | G10H1/36 | 分类号: | G10H1/36 |
代理公司: | 北京律智知识产权代理有限公司 11438 | 代理人: | 孙宝海;阚梓瑄 |
地址: | 310052 浙江省杭州市萧山区钱江世*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 音频 处理 方法 装置 计算 设备 以及 介质 | ||
1.一种音频处理方法,其特征在于,包括:
从用户演唱歌曲的音频数据中提取用户音频特征,所述用户音频特征包括用户音高序列;
确定所述用户音高序列与第一标准音高序列的音域区间是否一致;
若不一致,则基于所述用户音高序列的音域区间与所述第一标准音高序列的音域区间对应的音高差,生成与所述用户音高序列的音域区间一致的第二标准音高序列;
基于所述第二标准音高序列对所述用户音高序列进行修正。
2.根据权利要求1所述的方法,其特征在于,所述确定所述用户音高序列与第一标准音高序列的音域区间是否一致,包括:
确定第一标准音高序列的平均值与所述用户音高序列的平均值之间的音高差;
若所述音高差大于预定阈值,则确定所述用户音高序列与所述第一标准音高序列的音域区间不一致;
若所述音高差小于或等于所述预定阈值,则确定所述用户音高序列与所述第一标准音高序列的音域区间一致。
3.根据权利要求2所述的方法,其特征在于,所述生成与所述用户音高序列的音域区间一致的第二标准音高序列,包括:
将所述第一标准音高序列中各个音高值减去所述音高差,生成所述第二标准音高序列,所述第二标准音高序列与所述用户音高序列的音域区间一致。
4.根据权利要求1所述的方法,其特征在于,所述基于所述第二标准音高序列对所述用户音高序列进行修正,包括:
确定所述第二标准音高序列与所述用户音高序列中对应音高的差值;
基于所述差值对所述用户音高序列中的对应音高进行修正。
5.根据权利要求1所述的方法,其特征在于,所述用户音频特征还包括用户节奏序列,所述方法还包括:
确定标准节奏序列与所述用户节奏序列中对应节奏时长的比值;
基于所述比值对所述用户节奏序列中对应节奏时长进行修正。
6.根据权利要求2所述的方法,其特征在于,所述用户音频特征还包括伴奏序列,所述方法还包括:
若所述音高差大于所述预定阈值,则基于所述音高差确定所述歌曲的伴奏的升降调系数;
基于所述升降调系数对所述伴奏序列进行升降调操作。
7.根据权利要求1至6中任一项所述的方法,其特征在于,所述从用户演唱歌曲的音频数据中提取用户音频特征,包括:
从用户演唱歌曲的音频数据中提取各个歌词的时间戳信息;
基于所述时间戳信息与标准歌曲歌词进行逐字时长对齐,生成所述用户音高序列。
8.根据权利要求1所述的方法,其特征在于,所述方法还包括:
响应于用户的修音触发操作,确定与所述修音触发操作对应的修音模式;
基于所述修音模式,从修音模板库中获取与所述歌曲以及所述修音模式对应的修音模板,所述修音模板包括所述第一标准音高序列,所述修音模板库中包含与所述歌曲对应的多种修音模式下的修音模板。
9.根据权利要求8所述的方法,其特征在于,所述方法还包括:
基于旋律改编模型对所述歌曲进行改编,生成与所述歌曲对应的多种修音模式的修音模板。
10.一种音频处理装置,其特征在于,包括:
特征提取模块,用于从用户演唱歌曲的音频数据中提取用户音频特征,所述用户音频特征包括用户音高序列;
判断模块,用于确定所述用户音高序列与第一标准音高序列的音域区间是否一致;
模板生成模块,用于若不一致,则基于所述用户音高序列的音域区间与所述第一标准音高序列的音域区间对应的音高差,生成与所述用户音高序列的音域区间一致的第二标准音高序列;
修正模块,用于基于所述第二标准音高序列对所述用户音高序列进行修正。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州网易云音乐科技有限公司,未经杭州网易云音乐科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110524742.4/1.html,转载请声明来源钻瓜专利网。