[发明专利]基于声音信号图像化的综合管廊风险识别方法和系统在审
申请号: | 202210010115.3 | 申请日: | 2022-01-06 |
公开(公告)号: | CN114445619A | 公开(公告)日: | 2022-05-06 |
发明(设计)人: | 王月;齐庆杰;杨敬虎;王安虎;李丹;刘思昀 | 申请(专利权)人: | 煤炭科学研究总院有限公司 |
主分类号: | G06V10/25 | 分类号: | G06V10/25;G06V10/764;G06V10/774;G06V10/82;G06K9/62;G06N3/04;G10L25/03;G10L25/51 |
代理公司: | 北京清亦华知识产权代理事务所(普通合伙) 11201 | 代理人: | 杜月 |
地址: | 100020 北*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 声音 信号 图像 综合 风险 识别 方法 系统 | ||
1.一种基于声音信号图像化的综合管廊风险识别方法,其特征在于,包括以下步骤:
采集综合管廊内部的多类灾害对应的声音信号,作为样本声音信号,其中,所述样本声音信号存储于综合管廊声音信息灾害库;
对所述样本声音信号进行图像化处理,以生成所述样本声音信号的声音语谱图,并将所述声音语谱图作为所述样本声音信号的样本图像,并基于所述样本声音信号对应的灾害信息对所述样本图像进行检测框标注;
基于所述样本图像和对应的标注检测框,对构建的基于深度学习目标检测算法的灾害识别模型进行训练,以生成训练好的目标灾害识别模型;
采集所述综合管廊当前待识别的声音序列,所述声音序列中包括多个待识别声音信号;
生成所述待识别的声音序列对应的待识别声音语谱图,并将所述待识别声音语谱图输入所述目标灾害识别模型中,以输出所述待识别声音序列对应的灾害识别结果。
2.根据权利要求1所述的方法,其特征在于,所述采集综合管廊内部的多类灾害对应的声音信号,作为样本声音信号,包括:
采集所述综合管廊各类灾害发生前期和发生过程中的真实声音信号;
对所述综合管廊各类灾害发生前期和发生过程中的声音进行模拟,以生成模拟声音信号;
基于所述真实声音信号和所述模拟声音信号,生成所述样本声音信号。
3.根据权利要求1或2任一项所述的方法,其特征在于,所述基于所述真实声音信号和所述模拟声音信号,生成所述样本声音信号,包括:
对所述真实声音信号和所述模拟声音信号,进行预加重处理操作、分帧处理操作、加窗处理操作和降噪处理操作,以生成所述样本声音信号。
4.根据权利要求1所述的方法,其特征在于,所述方法,还包括:
基于所述样本声音信号的所述声音语谱图,制作对应的虚拟声音语谱图;
将所述声音语谱图和所述虚拟声音语谱图作为所述样本图像,并根据所述样本声音信号对应的灾害信息,对所述样本图像进行检测框标注。
5.根据权利要求1所述的方法,其特征在于,所述基于所述样本图像和对应的标注检测框,对构建的基于深度学习目标检测算法的灾害识别模型进行训练,以生成训练好的目标灾害识别模型,包括:
所述基于深度学习目标检测算法的灾害识别模型的特征提取骨架、检测层、融合层等网络结构根据所述样本图像的特征复杂程度与所述检测框标注结果的尺寸分布情况确定。
6.根据权利要求1所述的方法,其特征在于,所述生成所述待识别的声音序列的待识别声音语谱图,并将所述待识别声音语谱图输入所述目标灾害识别模型中,以输出所述待识别声音序列对应的灾害识别结果,包括:
将所述待识别声音语谱图输入所述目标灾害识别模型中,以输出所述待识别声音语谱图对应的预测检测框;
获取被所述目标灾害识别模型漏检的标注检测框i,并获取所述标注检测框i相邻的预测检测框i-1和预测检测框i+1;
基于所述预测检测框i-1和预测检测框i+1的属性信息,确定所述标注检测框i对应的预测检测框i的属性信息;
根据所述预测检测框i的属性信息,输出所述目标灾害识别模型漏检的所述待识别声音序列中的灾害识别结果。
7.根据权利要求1所述的方法,其特征在于,所述方法还包括:
灾害识别后,获取所述待识别声音语谱图上目标检测框的属性信息;
根据每个所述目标检测框的属性信息,确定所述目标检测框的平均长度、平均高度和平均间隔长度。
8.根据权利要求7所述的方法,其特征在于,所述方法还包括:
灾害识别后,获取所述待识别声音语谱图的图像尺寸;
根据所述平均长度和所述图像尺寸,预测灾害发生时目标声音信号的平均持续时间;
根据所述目标检测框的属性信息和所述图像尺寸,获取所述目标声音信号所在的频段范围;
根据所述平均间隔长度和所述图像尺寸,获取相邻的所述目标声音信号的平均间隔时长。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于煤炭科学研究总院有限公司,未经煤炭科学研究总院有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210010115.3/1.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序