[发明专利]动态目标声源跟踪监测方法及终端设备

权利要求书

1.一种动态目标声源跟踪监测方法，其特征在于，包括：

获取目标声源的多通道声信号；

对所述多通道声信号进行声场重建处理，得到所述目标声源在预定区域的声场；所述对所述多通道声信号进行声场重建处理，得到所述目标声源在预定区域的声场，包括：依据所述多通道声信号，确定声信号协方差矩阵；基于预设的信号相关信息，确定导向矢量以及所述导向矢量的共轭矢量；依据所述声信号协方差矩阵、所述导向矢量以及所述共轭矢量的乘积，确定所述目标声源在预定区域的声场；

基于所述声场，确定所述目标声源的位置；所述基于所述声场，确定所述目标声源的位置，包括：确定所述声场对应的最大声场值；依据所述最大声场值对应的位置，确定所述目标声源的方位角和俯仰角；依据所述目标声源的位置，判断所述目标声源是否位于预设的图像采集设备的视场范围；所述依据所述目标声源的位置，判断所述目标声源是否位于预设的图像采集设备的视场范围，包括：将所述目标声源的所述方位角和所述俯仰角，分别与预定义的所述图像采集设备的方位角范围和俯仰角范围进行比较；依据比较结果，判断所述目标声源是否位于预设的图像采集设备的视场范围；

若所述目标声源位于预设的图像采集设备的视场范围，则确定与所述多通道声信号对应的视频帧图像；

依据所述目标声源的声场和所述视频帧图像，对所述目标声源进行定位处理；其中，所述依据所述目标声源的声场和所述视频帧图像，对所述目标声源进行定位处理，包括：对所述声场进行边缘化处理；基于预配置的多种声场值范围分别对应的RGB转换规则，对边缘化处理后的所述声场进行RGB参数转换，得到伪彩图像；将所述伪彩图像和所述视频帧图像的同一像素位置的RGB参数，进行加权相加处理，得到融合图像；在所述融合图像上对所述目标声源的位置进行显示处理。

2.根据权利要求1所述的方法，其特征在于，所述确定与所述多通道声信号对应的视频帧图像，包括：

依据所述多通道声信号的时间标签，确定与所述多通道声信号对应的视频帧图像。

3.根据权利要求1所述的方法，其特征在于，所述对所述目标声源的声场进行边缘化处理，包括：

确定所述声场的各个位置分别对应的初始声场值；

将所述声场的各个位置分别对应的初始声场值，分别与预设的声场门限值进行比较；

依据比较结果，得到所述声场的各个位置分别对应的目标声场值。

4.一种动态目标声源跟踪监测装置，其特征在于，包括：

声信号获取模块，用于获取目标声源的多通道声信号；

声场确定模块，用于对所述多通道声信号进行声场重建处理，得到所述目标声源在预定区域的声场；声场确定模块用于：依据多通道声信号，确定声信号协方差矩阵；基于预设的信号相关信息，确定导向矢量以及导向矢量的共轭矢量；依据声信号协方差矩阵、导向矢量以及共轭矢量的乘积，确定目标声源在预定区域的声场；

声源位置确定模块，用于基于所述声场，确定所述目标声源的位置；所述声源位置确定模块用于：确定声场对应的最大声场值；依据最大声场值对应的位置，确定目标声源的方位角和俯仰角；

视场区域判断模块，用于依据所述目标声源的位置，判断所述目标声源是否位于预设的图像采集设备的视场范围；所述视场区域判断模块用于：将目标声源的方位角和俯仰角，分别与预定义的图像采集设备的方位角范围和俯仰角范围进行比较；依据比较结果，判断目标声源是否位于预设的图像采集设备的视场范围；

视频帧图像确定模块，用于若所述目标声源位于预设的图像采集设备的视场范围，则确定与所述多通道声信号对应的视频帧图像；

声源定位处理模块，用于依据所述目标声源的声场和所述视频帧图像，对所述目标声源进行定位处理；所述声源定位处理模块用于：对声场进行边缘化处理；基于预配置的多种声场值范围分别对应的RGB转换规则，对边缘化处理后的声场进行RGB参数转换，得到伪彩图像；将伪彩图像和视频帧图像的同一像素位置的RGB参数，进行加权相加处理，得到融合图像；在融合图像上对目标声源的位置进行显示处理。

5.一种终端设备，包括：存储器、处理器及存储在该存储器上并可在该处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序以实现权利要求1至3中任一项所述的方法。

6.一种计算机可读存储介质，存储有计算机可执行指令，所述计算机可执行指令用于执行权利要求1至3中任一项所述的方法。