[发明专利]一种音频合成的方法及终端有效
申请号: | 201611245903.1 | 申请日: | 2016-12-29 |
公开(公告)号: | CN106652997B | 公开(公告)日: | 2020-07-28 |
发明(设计)人: | 陈雪琪 | 申请(专利权)人: | 腾讯音乐娱乐(深圳)有限公司 |
主分类号: | G10L13/033 | 分类号: | G10L13/033;G10L25/03;G10L25/06 |
代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 郝传鑫;熊永强 |
地址: | 518052 广东省深圳市*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 音频 合成 方法 终端 | ||
1.一种音频合成的方法,其特征在于,所述方法包括:
接收用户输入的人声音频,并对所述人声音频进行切割处理,得到M个音频切片,M为大于0的正整数;所述M个音频切片保留有用户说话声音原本的音色;
根据预设乐曲MIDI文件中的至少一个MIDI信息,确定所述M个音频切片中每个音频切片对应的目标MIDI信息,其中,每个音频切片对应一个或多个目标MIDI信息,所述至少一个MIDI信息按照时间序列组成所述预设乐曲MIDI文件,所述MIDI信息包括旋律;
根据确定的所述目标MIDI信息中的旋律,将所述M个音频切片中每个音频切片进行对应的音频处理,得到处理后的M个音频切片,所述处理后的M个音频切片具有与所述目标MIDI信息相同的旋律;
按照时间序列,将所述处理后的M个音频切片进行拼接和合成处理,以得到歌声音频;
所述对所述人声音频进行切割处理,得到M个音频切片具体包括:在没有所述人声音频对应的文本歌词的情况下,通过对所述人声音频进行语音识别,得到所述人声音频对应的文本歌词,并对所述文本歌词进行分割处理,得到与所述人声音频对应的至少一个音频切片。
2.如权利要求1所述的方法,其特征在于,所述根据预设乐曲MIDI文件中的至少一个MIDI信息,确定所述M个音频切片中每个音频切片对应的目标MIDI信息具体包括:
按照时间序列,将预设乐曲MIDI文件中的至少一个MIDI信息顺序匹配给所述M个音频切片中每个音频切片,并作为所述每个音频切片对应的目标MIDI信息;
其中,每个音频切片对应一个或多个目标MIDI信息。
3.如权利要求1所述的方法,其特征在于,所述旋律包括音高、音长、音量中的至少一个。
4.如权利要求1所述的方法,其特征在于,所述对所述人声音频进行切割处理,得到M个音频切片具体包括:
在存在所述人声音频对应的文本歌词的情况下,通过对所述文本歌词进行分割处理,得到与所述人声音频对应的至少一个音频切片。
5.如权利要求1-4中任意一项所述的方法,其特征在于,所述方法还包括:
获取所述预设乐曲MIDI文件或所述人声音频对应的伴奏音频;
将所述伴奏音频和所述歌声音频进行音频合成处理,得到混合歌曲音频。
6.一种终端,其特征在于,所述终端包括:
接收单元,用于接收用户输入的人声音频;
切割单元,用于对所述人声音频进行切割处理,得到M个音频切片,M为大于0的正整数;所述M个音频切片保留有用户说话声音原本的音色;
确定单元,用于根据预设乐曲MIDI文件中的至少一个MIDI信息,确定所述M个音频切片中每个音频切片对应的目标MIDI信息,其中,每个音频切片对应一个或多个目标MIDI信息,所述至少一个MIDI信息按照时间序列组成所述预设乐曲MIDI文件,所述MIDI信息包括旋律;
处理单元,用于根据确定的所述目标MIDI信息中的旋律,将所述M个音频切片中每个音频切片进行对应的音频处理,得到处理后的M个音频切片,所述处理后的M个音频切片具有与所述目标MIDI信息相同的旋律;
合成单元,用于按照时间序列,将所述处理后的M个音频切片进行拼接和合成处理,以得到歌声音频;
所述切割单元,具体用于在没有所述人声音频对应的文本歌词的情况下,通过对所述人声音频进行语音识别,得到所述人声音频对应的文本歌词,并对所述文本歌词进行分割处理,得到与所述人声音频对应的至少一个音频切片。
7.如权利要求6所述的终端,其特征在于,
所述确定单元,具体用于按照时间序列,将预设乐曲MIDI文件中的至少一个MIDI信息顺序匹配给所述M个音频切片中每个音频切片,并作为所述每个音频切片对应的目标MIDI信息;
其中,每个音频切片对应一个或多个目标MIDI信息。
8.如权利要求6所述的终端,其特征在于,所述旋律包括音高、音长、音量中的至少一个。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯音乐娱乐(深圳)有限公司,未经腾讯音乐娱乐(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201611245903.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:刀柄(16200)
- 下一篇:语音识别系统以及方法