[发明专利]音频修复方法、装置及电子设备和计算机可读存储介质

说明书

本申请公开了一种音频修复方法、装置及一种电子设备和计算机可读存储介质，该方法包括：获取待处理音频，提取待处理音频的时域特征和频域特征；对待处理音频的空白频域部分进行标记得到待处理音频的频域标记特征；将时域特征输入训练完成的时域波形修复生成器中，获得待处理音频的第一时域信号，将频域特征和频域标记特征输入训练完成的频域频谱修复生成器中，获得待处理音频的第一频域信号；将第一频域信号转换为第二时域信号，将第一时域信号和第二时域信号整合为目标时域信号，并基于目标时域信号得到目标音频。本申请提供的音频修复方法，不需要占用额外的带宽存储冗余信息，兼容性较好，提高了音频修复的准确性。

技术领域

本申请涉及音频处理技术领域，更具体地说，涉及音频修复方法、装置及电子设备和计算机可读存储介质。

背景技术

在实际应用中，由于网络传输和音频编解码原因使得一些歌曲存在音频片段丢失，造成音频中存在一些长空白片段，因此需要对存在长空白片段的音频进行修复。

在相关技术中，借鉴图像修复技术，可以采用前向纠错(FEC，Feedforward ErrorCorrection)方式，即在当前数据包中加入前一个数据包的冗余信息并进行传输，若存在丢失数据包，则可以通过临近数据包包含的冗余信息，恢复出丢失数据包内容。然而，编码冗余信息需要占用额外带宽，且存在编码器兼容问题。

另外，可以采用丢包补偿(PLC，Packet Loss Concealment)的方式，即在解码端根据已知语音帧预测丢失帧，该方式无需额外带宽，兼容性好。但是，经典PLC方案基于信号分析，通过对正常接收包的参数的复制或者调整，预测丢包帧的波形，处理能力比较弱，只能处理较短的数据帧，无法适用于长空白音频的修复。

可见，在实现本发明过程中，发明人发现相关技术中至少存在如下问题：需要占用额外带宽、兼容性较差。

发明内容

本申请的目的在于提供一种音频修复方法、装置及一种电子设备和一种计算机可读存储介质，不需要占用额外的带宽存储冗余信息，兼容性较好，同时提高了音频修复的准确性。

为实现上述目的，本申请第一方面提供了一种音频修复方法，包括：

获取待处理音频，提取所述待处理音频的时域特征和频域特征；

对所述待处理音频的空白频域部分进行标记得到所述待处理音频的频域标记特征；

将所述时域特征输入训练完成的时域波形修复生成器中，获得所述待处理音频的第一时域信号，将所述频域特征和所述频域标记特征输入训练完成的频域频谱修复生成器中，获得所述待处理音频的第一频域信号；

将所述第一频域信号转换为第二时域信号，将所述第一时域信号和所述第二时域信号整合为目标时域信号，并基于所述目标时域信号得到目标音频。

为实现上述目的，本申请第二方面提供了一种音频修复装置，包括：

第一提取模块，用于获取待处理音频，提取所述待处理音频的时域特征和频域特征；

标记模块，用于对所述待处理音频的空白频域部分进行标记得到所述待处理音频的频域标记特征；

输入模块，用于将所述时域特征输入训练完成的时域波形修复生成器中，获得所述待处理音频的第一时域信号，将所述频域特征和所述频域标记特征输入训练完成的频域频谱修复生成器中，获得所述待处理音频的第一频域信号；

整合模块，用于将所述第一频域信号转换为第二时域信号，将所述第一时域信号和所述第二时域信号整合为目标时域信号，并基于所述目标时域信号得到目标音频。

为实现上述目的，本申请第三方面提供了一种电子设备，包括：

存储器，用于存储计算机程序；