[发明专利]语音传输方法、系统、装置、计算机可读存储介质和设备有效
申请号: | 202010104793.7 | 申请日: | 2020-02-20 |
公开(公告)号: | CN112820306B | 公开(公告)日: | 2023-08-15 |
发明(设计)人: | 梁俊斌 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G10L19/16 | 分类号: | G10L19/16;G10L19/008 |
代理公司: | 华进联合专利商标代理有限公司 44224 | 代理人: | 董慧;李文渊 |
地址: | 518000 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 语音 传输 方法 系统 装置 计算机 可读 存储 介质 设备 | ||
1.一种语音传输方法,包括:
获取语音编码码流中的当前编码数据;
通过训练好的基于机器学习的丢包恢复能力预测模型,根据当前编码数据对应的第一语音编码特征参数以及所述当前编码数据的在前编码数据对应的第二语音编码特征参数,获得所述当前编码数据对应的丢包恢复能力;
根据所述丢包恢复能力判决是否需要进行冗余编码处理;
若是,则根据所述当前编码数据进行冗余编码生成相应的冗余包后,再将所述当前编码数据及所述冗余包传输至接收端;
若否,则直接将所述当前编码数据传输至接收端;
其中,所述丢包恢复能力预测模型通过以下步骤确定:
获取训练集中的样本语音序列,对所述样本语音序列进行语音编码,获得样本语音编码码流,提取所述样本语音编码码流中的当前编码数据所采用的第一语音编码特征参数以及所述当前编码数据的在前编码数据所采用的第二语音编码特征参数;
获取直接对所述样本语音编码码流进行解码并获得第一语音信号后,基于所述第一语音信号所确定的第一语音质量评分;获取对所述当前编码数据进行模拟丢包恢复处理获得恢复包,对所述恢复包进行解码并获得第二语音信号后,基于所述第二语音信号所确定的第二语音质量评分;
根据所述第一语音质量评分与所述第二语音质量评分之间的评分差异确定所述当前编码数据对应的真实丢包恢复能力;将所述第一语音编码特征参数及所述第二语音编码特征参数输入至机器学习模型,通过所述机器学习模型输出所述当前编码数据所对应的预测丢包恢复能力;
根据所述真实丢包恢复能力与所述预测丢包恢复能力之间的差异调整所述机器学习模型的模型参数后,返回至所述获取训练集中的样本语音序列的步骤继续训练,直至满足训练结束条件。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
获取原始语音信号;
将原始语音信号进行分割,获得原始语音序列;
依次对所述原始语音序列中的语音片段进行语音编码,获得语音编码码流。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
获取原始语音序列中的语音片段各自对应的语音编码特征参数;
根据所述语音编码特征参数对相应的语音片段进行语音编码,生成对应的编码数据后获得语音编码码流;
缓存语音编码过程中各个编码数据所采用的语音编码特征参数。
4.根据权利要求1所述的方法,其特征在于,所述通过训练好的基于机器学习的丢包恢复能力预测模型,根据当前编码数据对应的第一语音编码特征参数以及所述当前编码数据的在前编码数据对应的第二语音编码特征参数,获得所述当前编码数据对应的丢包恢复能力,包括:
将所述当前编码数据对应的第一语音编码特征参数以及所述当前编码数据的在前编码数据对应的第二语音编码特征参数输入至丢包恢复能力预测模型;
通过所述丢包恢复能力预测模型,根据所述第一语音编码特征参数及所述第二语音编码特征参数,输出对所述当前编码数据进行直接解码所确定的第一语音质量评分与对所述当前编码数据进行丢包恢复处理后解码所确定的第二语音质量评分之间的评分差异;
根据所述评分差异确定所述当前编码数据对应的丢包恢复能力;
其中,所述当前编码数据对应的丢包恢复能力与所述评分差异成反相关。
5.根据权利要求1所述的方法,其特征在于,所述根据所述当前编码数据进行冗余编码生成相应的冗余包后,再将所述当前编码数据及所述冗余包传输至接收端,包括:
获取接收端所反馈的丢包状态信息;
根据所述丢包状态信息确定所述当前编码数据所对应的冗余率;
按照所述冗余率,根据所述当前编码数据生成冗余包后将所述当前编码数据及所述冗余包传输至所述接收端。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010104793.7/1.html,转载请声明来源钻瓜专利网。