[发明专利]一种音频信号的处理方法、装置及存储介质

权利要求书

1.一种音频信号的处理方法，其特征在于，包括：

每接收到音频信号中的一个音频帧时，根据预设的第一映射关系，识别所述音频帧的每一频点对应的处理数值；其中，所述第一映射关系用于指示与每一频点一一对应的处理数值，所述处理数值用于指示后续接收到的音频帧的数量，并对该数量的音频帧对应的频点执行啸叫抑制处理；

根据识别出的所述音频帧的频点对应的处理数值，对该频点执行相应的处理；

在完成对所述音频帧的每一频点的处理后，将所述音频帧发送至终端设备，并存储处理前的所述音频帧；

当存储的所述音频帧的数量达到预设的第一数量阈值时，根据每一所述音频帧的同一频点，计算该频点对应的状态参数；

根据每一所述频点对应的状态参数以及预设的第二映射关系，获得与每一所述频点对应的第一Q值和第二Q值；其中，所述第二映射关系用于指示与每一状态参数对应的第一Q值和第二Q值，所述第一Q值表征在相应的状态参数下采取执行啸叫抑制处理的控制动作后获得的期望回报，所述第二Q值表征在相应的状态参数下采取不执行啸叫抑制处理的控制动作后获得的期望回报；

当所述频点对应的第一Q值大于所述第二Q值，且所述频点对应的处理数值为零时，将所述第一映射关系中该频点对应的处理数值更新为预设数值，并清空所存储的音频帧。

2.如权利要求1所述的音频信号的处理方法，其特征在于，在所述每接收到音频信号中的一个音频帧时，根据预设的第一映射关系，识别所述音频帧的每一频点对应的处理数值之前，还包括：

循环接收音频信号，并在接收到所述音频信号时，开始计时；

当计时的时间在预设的时间阈值内时，根据接收到的所述音频信号的音频帧，通过强化学习训练得到所述第二映射关系。

3.如权利要求2所述的音频信号的处理方法，其特征在于，所述根据接收到的所述音频信号的音频帧，通过强化学习训练得到所述第二映射关系，具体包括：

依次获取接收到的每一所述音频帧的预设频点并存储；

当存储的所述预设频点的数量等于预设的第二数量阈值时，根据每一所述预设频点，计算所述预设频点对应的第一状态参数，并采用贪婪策略选取一个控制动作；其中，所述控制动作包括执行啸叫抑制处理和不执行啸叫抑制处理；

当选取的所述控制动作为执行啸叫抑制处理时，对所述音频帧的预设频点执行啸叫抑制处理；

当存储的所述预设频点的数量等于预设的第三数量阈值时，根据在所述预设频点的数量等于预设的第二数量阈值之后才存储的每一所述预设频点，计算所述预设频点对应的第二状态参数；其中，所述第二数量阈值小于所述第三数量阈值；

根据存储的每一所述预设频点、所述第一状态参数、所述第二状态参数和所选取的所述控制动作，计算得到所述第一状态参数对应的第一Q值和第二Q值，以更新预设的第二映射关系中相应的状态参数所对应的第一Q值和第二Q值；

在更新完所述第二映射关系中相应的第一Q值和第二Q值后，清空所存储的预设频点，并返回步骤：依次获取接收到的每一所述音频帧的预设频点并存储。