[发明专利]丢包补偿方法及装置在审
申请号: | 202011502968.6 | 申请日: | 2020-12-18 |
公开(公告)号: | CN112634912A | 公开(公告)日: | 2021-04-09 |
发明(设计)人: | 王晓红;陈佳路;王冬晓;杨明祺;马楠;高强;夏龙;郭常圳 | 申请(专利权)人: | 北京猿力未来科技有限公司 |
主分类号: | G10L19/00 | 分类号: | G10L19/00;G10L25/30;G10L25/03;G10L25/24 |
代理公司: | 北京智信禾专利代理有限公司 11637 | 代理人: | 刘晓楠 |
地址: | 100102 北京市朝阳区广顺南大*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 补偿 方法 装置 | ||
1.一种丢包补偿方法,其特征在于,所述方法包括:
接收音频数据流;
若确定所述音频数据流中当前帧为丢包帧,且所述当前帧的上一帧不是丢包帧,则确定所述当前帧为第一个丢包帧;
从所述音频数据流中获取所述第一个丢包帧之前的M帧历史音频数据,生成第一音频序列,其中,所述M为大于1的正整数;
确定所述M帧历史音频数据的音频特征,并基于所述M帧历史音频数据的音频特征,生成第二音频序列;
基于所述第一音频序列,在所述第二音频序列中确定与所述第一音频序列的互相关性最大的位置,并将所述第二音频序列中所述互相关性最大的位置之后的音频数据确定为所述第一个丢包帧的第一补偿音频数据。
2.如权利要求1所述的丢包补偿方法,其特征在于,所述基于所述M帧历史音频数据的音频特征,生成第二音频序列,包括:
将所述第一个丢包帧上一帧的历史音频数据的音频特征确定为所述第一个丢包帧的音频数据的预测音频特征;
将所述M帧历史音频数据的音频特征与所述第一个丢包帧的音频数据的预测音频特征输入音频合成模型中,得到所述第二音频序列,其中,所述第二音频序列中包括合成的所述M帧与所述第一个丢包帧的采样音频数据。
3.如权利要求1所述的丢包补偿方法,其特征在于,所述基于所述第一音频序列,在所述第二音频序列中确定与所述第一音频序列的互相关性最大的位置,包括:
基于所述第二音频序列的采样频率从所述第一音频序列中沿终点向起点方向获取N个连续的采样音频数据,得到第一采样音频数据组,其中,所述N为大于1的正整数;
以N为采样音频数据组的长度,逐次从所述第二音频序列中沿终点向起点方向获取N个连续的采样音频数据,得到第二采样音频数据组集合,其中,采样音频数据组的长度为采样音频数据组包括的采样音频数据的数量;
对每个得到的第二采样音频数据组,将所得到的第二采样音频数据组与所述第一采样音频数据组进行互相关性计算,以互相关性最大的第二采样音频数据组所在的位置确定所述互相关性最大的位置。
4.如权利要求3所述的丢包补偿方法,其特征在于,所述以互相关性最大的第二采样音频数据组所在的位置确定所述互相关性最大的位置,包括:
将所述互相关性最大的第二采样音频数据组中距离终点最近的采样音频数据所在的位置确定为所述互相关性最大的位置。
5.如权利要求1所述的丢包补偿方法,其特征在于,所述方法还包括:
从所述第一音频序列中沿终点向起点的方向获取X个未播放的采样音频数据,其中,所述X大于1且小于一帧采样音频数据的数量;
将所述第二音频序列中所述互相关性最大的位置之前的X个采样音频数据与所述X个未播放的采样音频数据进行融合,得到融合音频数据;
将所述第一音频序列中X个未播放的音频数据替换为所述融合音频数据,并将所述融合音频数据与所述第一个丢包帧的补偿音频数据进行拼接。
6.如权利要求1所述的丢包补偿方法,其特征在于,所述方法还包括:
若确定所述音频数据流中当前帧为丢包帧,且所述当前帧的上一帧为丢包帧,则确定所述当前帧为连续丢包帧,其中,所述连续丢包帧为多个连续的丢包帧中非第一个丢包帧的丢包帧;
基于所述当前帧之前最后一个非丢包帧的历史音频数据的音频特征,确定所述连续丢包帧的第二补偿音频数据。
7.如权利要求6所述的丢包补偿方法,其特征在于,所述基于所述当前帧之前最后一个非丢包帧的历史音频数据的音频特征,确定所述连续丢包帧的第二补偿音频数据,包括:
以所述当前帧之前最后一个非丢包帧的历史音频数据的音频特征作为所述连续丢包帧的预测音频特征;
将所述连续丢包帧的预测音频特征输入音频合成模型中,得到所述连续丢包帧的第二补偿音频数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京猿力未来科技有限公司,未经北京猿力未来科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011502968.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种防喷器及其使用方法
- 下一篇:一种脊柱指标测量仪器及其使用方法