[发明专利]声源定位方法、装置、计算机可读存储介质和电子设备在审
申请号: | 202011552864.6 | 申请日: | 2020-12-24 |
公开(公告)号: | CN112799016A | 公开(公告)日: | 2021-05-14 |
发明(设计)人: | 胡玉祥 | 申请(专利权)人: | 北京地平线信息技术有限公司 |
主分类号: | G01S5/20 | 分类号: | G01S5/20 |
代理公司: | 北京布瑞知识产权代理有限公司 11505 | 代理人: | 秦卫中 |
地址: | 100094 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 声源 定位 方法 装置 计算机 可读 存储 介质 电子设备 | ||
1.一种声源定位方法,包括:
对传声器阵列所采集声源的原始混合音频信号进行语音分离,以获取多通道分离音频信号;
从所述多通道分离音频信号中确定唤醒词所在的时间段;
从所述原始混合音频信号中确定所述唤醒词所在的时间段对应的混合多通道音频信号;
从所述多通道分离音频信号中确定所述唤醒词所在的单通道音频信号;
基于所述混合多通道音频信号以及所述唤醒词所在的单通道音频信号,定位所述声源。
2.根据权利要求1所述的方法,其中,所述从所述多通道分离音频信号中确定所述唤醒词所在的单通道音频信号,包括:
从所述多通道分离音频信号中识别唤醒词;
确定所述唤醒词所在时间段以及所述唤醒词所在的音频信号通道;
根据所述唤醒词信号所在时间段,从所述唤醒词所在的音频信号通道中确定所述单通道音频信号。
3.根据权利要求2所述的方法,其中,所述从所述多通道分离音频信号中识别唤醒词,包括:
利用神经网络模型从所述多通道分离音频信号中识别唤醒词。
4.根据权利要求1至3中的任一项所述的方法,其中,所述基于所述混合多通道音频信号以及所述唤醒词所在的单通道音频信号,定位所述声源,包括:
从所述混合多通道音频信号中提取第一频域特征,所述第一频域特征用于表征所述传声器阵列中不同传声器单元对应的频域信号之间的相对传递函数;
从所述唤醒词所在的单通道音频信号中提取第二频域特征,所述第二频域特征用于表征所述单通道音频信号的频域能量值;
基于所述第一频域特征和所述第二频域特征,定位所述声源。
5.根据权利要求4所述的方法,其中,所述基于所述第一频域特征和所述第二频域特征,定位所述声源,包括:
基于所述第一频域特征和所述第二频域特征,获取所述声源的多个预设方位类别的概率;
根据所述多个预设方位类别的概率中的最大概率对应的预设方位类别,定位所述声源。
6.根据权利要求5所述的方法,其中,在所述传声器阵列为线性传声器阵列的情况下,所述多个预设方位类别中的每个预设方位类别对应所述声源相对所述线性传声器阵列的一个角度范围,或者,在所述传声器阵列为分布式传声器阵列的情况下,所述多个预设方位类别中的每个预设方位类别对应所述分布式传声器阵列所在空间中的一个位置区域。
7.根据权利要求4所述的方法,其中,所述从所述混合多通道音频信号中提取第一频域特征,包括:
对所述混合多通道音频信号进行时频变换处理,得到多个频点的第一频域信号,并针对所述多个频点中的每个频点,对所述第一频域信号进行特征提取,得到所述传声器阵列的不同传声器单元对应的频域信号之间的相对传递函数值的实部和虚部,作为所述第一频域特征;
其中,所述从所述唤醒词所在的单通道音频信号中提取第二频域特征,包括:
对所述唤醒词所在的单通道音频信号进行时频变换处理,得到多个频点的第二频域信号,并针对所述多个频点中的每个频点,对所述第二频域信号进行归一化处理,得到所述第二频域特征。
8.一种声源定位装置,包括:
语音分离模块,用于对传声器阵列所采集声源的原始混合音频信号进行语音分离,以获取多通道分离音频信号;
第一确定模块,用于从所述多通道分离音频信号中确定唤醒词所在的时间段;
第二确定模块,用于从所述原始混合音频信号中确定所述唤醒词所在的时间段对应的混合多通道音频信号;
第三确定模块,用于从所述多通道分离音频信号中确定所述唤醒词所在的单通道音频信号;
定位模块,用于基于所述混合多通道音频信号以及所述唤醒词所在的单通道音频信号,定位所述声源。
9.一种计算机可读存储介质,所述存储介质存储有计算机程序,所述计算机程序用于执行上述权利要求1-7任一所述的方法。
10.一种电子设备,所述电子设备包括:
处理器;
用于存储所述处理器可执行指令的存储器;
所述处理器,用于执行上述权利要求1-7任一所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京地平线信息技术有限公司,未经北京地平线信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011552864.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种三维成像测试用光学系统
- 下一篇:聚苯胺基多元杂化膜及其制备方法和应用