[发明专利]一种音频信号处理方法、装置、终端及存储介质有效
申请号: | 201911301727.2 | 申请日: | 2019-12-17 |
公开(公告)号: | CN111009256B | 公开(公告)日: | 2022-12-27 |
发明(设计)人: | 侯海宁 | 申请(专利权)人: | 北京小米智能科技有限公司 |
主分类号: | G10L21/0216 | 分类号: | G10L21/0216;G10L21/0232 |
代理公司: | 北京善任知识产权代理有限公司 11650 | 代理人: | 康艳青 |
地址: | 100085 北京市海淀区清河*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 音频 信号 处理 方法 装置 终端 存储 介质 | ||
1.一种音频信号处理方法,其特征在于,所述方法包括:
由至少两个麦克风获取至少两个声源各自发出的音频信号,以获得所述至少两个麦克风各自在时域上的多帧原始带噪信号;
对于时域上的每一帧,根据所述至少两个麦克风各自的所述原始带噪信号,获取所述至少两个声源各自的频域估计信号;
对于所述至少两个声源中的每个声源,将所述频域估计信号在频域上划分为多个频域估计分量,其中,每个频域估计分量对应一个频域子带并且包含多个频点数据;
对于每一个声源,将各频域估计分量的相关矩阵分别进行特征分解,以获得各所述频域估计分量对应的目标特征向量;
基于每个声源的各所述目标特征向量和所述频域估计信号,获得每个频点的分离矩阵;其中,所述基于每个声源的各所述目标特征向量和所述频域估计信号,获得每个频点的分离矩阵,包括:对于每一个声源,基于第c个频域估计分量的所述目标特征向量的转置矩阵与所述第c个频域估计分量的乘积,获得所述第c个频域估计分量映射到预设空间内的映射数据;基于所述映射数据,以及第1至第N帧的所述原始带噪信号的迭代运算,获得所述分离矩阵;其中,所述N为所述原始带噪信号的帧数;所述c为小于或等于C的正整数,所述C为所述频域子带的个数;
基于所述分离矩阵及所述原始带噪信号,获得至少两个声源各自发出的声音的音频信号。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
对于每一个声源,基于所述第c个频域估计分量、与所述第c个频域估计分量的共轭转置的乘积,获得所述第c个频域估计分量的第一矩阵;
基于第1至第N帧的所述第c个频域估计分量的所述第一矩阵,获取所述第c个频域估计分量的相关矩阵。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
按照对数函数对所述映射数据进行非线性变换,以获得更新后的映射数据。
4.根据权利要求3所述的方法,其特征在于,所述基于所述映射数据,以及第1至第N帧的所述原始带噪信号的迭代运算,获得所述分离矩阵,包括:
将所述第c个频域估计分量的所述更新后的映射数据、所述频域估计信号、所述原始带噪信号以及第x-1个备选矩阵进行梯度迭代,得到第x个备选矩阵;其中,第1个备选矩阵为已知的单位矩阵;其中,所述x为大于或等于2的正整数;
当所述第x个备选矩阵满足迭代停止条件时,基于所述第x个备选矩阵,确定第c个所述分离矩阵。
5.根据所述权利要求4所述的方法,其特征在于,所述将所述第c个频域估计分量的所述更新后的映射数据、所述频域估计信号、所述原始带噪信号以及第x-1个备选矩阵进行梯度迭代,得到第x个备选矩阵,包括:
对所述第c个频域估计分量的所述更新后的映射数据进行一阶求导,以获得一阶导数;
对所述第c个频域估计分量的所述更新后的映射数据进行二阶求导,以获得二阶导数;
将所述一阶导数、所述二阶导数、所述频域估计信号、所述原始带噪信号及所述第x-1个备选矩阵进行梯度迭代,获得第x个备选矩阵。
6.根据权利要求1所述的方法,其特征在于,所述基于所述分离矩阵及所述原始带噪信号,获得至少两个声源各自发出的声音的音频信号,包括:
基于第1个所述分离矩阵至第C个所述分离矩阵,对一个所述频域估计信号对应的第n帧所述原始带噪信号进行分离,获得一个所述频域估计信号对应的第n帧所述原始带噪信号中不同所述声源的音频信号;其中,所述n为小于N的正整数;
组合各所述频域估计信号对应的第n帧所述原始带噪信号中第p个所述声源的音频信号,得到第p个所述声源的所述第n帧音频信号;其中,所述p为小于或等于P的正整数,所述P为声源的个数。
7.根据权利要求6所述的方法,其特征在于,所述方法还包括:
按照时间先后顺序,组合第p个所述声源的第1帧音频信号至第N帧音频信号,得到N帧所述原始带噪信号包含的第p个所述声源的音频信号。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京小米智能科技有限公司,未经北京小米智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911301727.2/1.html,转载请声明来源钻瓜专利网。