[发明专利]一种结合声纹识别和深度学习的回声消除方法

说明书

本发明公开了一种结合声纹识别和深度学习的回声消除方法，1)从目标说话人的语音片段中提取声学特征，通过预先训练好的包含递归神经网络模型的声纹编码器得到表征说话人信息的嵌入式向量，即声纹向量；2)从接收的信号中提取声学特征，所述信号包括近端信号和远端信号，通过AEC算法估计出出现的回声信号，即估计回声信号，同时得到线性方式消除后的包含残留回声的近端信号，即线性过滤信号；本发明提供的一种结合声纹识别和深度学习的回声消除方法，能够在双讲和非现性失真等情况下实现回声消除，即使在远端信号包含人声的情况下，大大地提高回声消除的效果。

技术领域

本发明涉及回声消除技术领域，进一步说，尤其涉及一种结合声纹识别和深度学习的回声消除方法。

背景技术

智能音箱在播放音频节目时，麦克风采集进来的信号既包含了目标说话人的信号(近端信号)，也包含了扬声器播放出的音频信号(远端回声)，这种情况下语音识别模块几乎无法工作。通常需要引入回声消除的方法把回声消除干净，同时保护近端的语音信号不受损失。目前主流的回声消除方法是借助硬件回路采集到的参考信号，来估计麦克风信号中存在的回声信号，将估计到的回声信号和原始信号做减法得到估计的近端信号，最后通过一个后置的非线性滤波器来抑制回声消除后残留的回声。在实际情况中，远端信号常常包含人声，后置的非线形滤波器根据信号成分很难区分多少成分是近端信号的人声，多少成分是回声信号中的人声。这种混淆严重影响了回声消除的效果。

经过检索，申请号为201810708151.0、名称为一种智能家居设备控制方法、智能音箱及智能家居系统的技术方案，仅仅解决了可以根据用户的行为习惯信息，主动提问用户是否开启相应的受控目标，简化了操作步骤，提升了用户体验等技术问题，其采用的技术方案是：采集用户的身份认证信息；对所述身份认证信息进行识别，获得身份认证结果；调取与所述身份认证结果对应的第一行为习惯信息；根据所述第一行为习惯信息，输出是否开启相应的受控目标的提示信息；其中，所述第一行为习惯信息是预先通过对所述用户的语音信息进行深度学习得到的。接收用户的声纹信息；调取与所述声纹信息对应的第二行为习惯信息；根据所述第二行为习惯信息，对相应的受控目标进行控制；其中，所述第二行为习惯信息为预先对所述用户的不同情感状态下的所述声纹信息进行深度学习得到的。

发明内容

为了解决远端信号包含人声时回声消除的效果不好的技术问题，本公开提供了一种结合声纹识别和深度学习的回声消除方法。

1)从目标说话人的语音片段中提取声学特征，通过预先训练好的包含递归神经网络模型的声纹编码器得到表征说话人信息的嵌入式向量，即声纹向量；

2)从接收的信号中提取声学特征，所述信号包括近端信号和远端信号，通过AEC算法估计出出现的回声信号，即估计回声信号，同时得到线性方式消除后的包含残留回声的近端信号，即线性过滤信号；

3)将估计回声信号、线性过滤信号以及远端信号声学特征合并，通过预先训练的二维卷积网络得到一组新的特征向量，将新的特征向量与声纹向量做特征合并；

4)合并后的特征向量通过预先训练的多层的递归神经网络模型中进行迭代运算，计算所述声学特征的掩膜；

5)采用所述掩膜对所述线性过滤信号的声学特征进行掩蔽；

6)将经过掩蔽后的所述声学特征与所述麦克风信号的相位进行合成，得到经过回声消除后的近端信号。

上述的一种结合声纹识别和深度学习的回声消除方法，其中：2)步中，从接收的麦克风信号中提取声学特征，所述麦克风信号包括近端信号和远端信号。