[发明专利]一种多功能辅助视听的方法及系统

说明书

本发明公开了一种多功能辅助视听的方法，包括以下步骤：获取至少三个视听采集系统中的语音采集模块采集的第一语音信号，获取至少三个视听采集系统的视频采集模块采集的视频信号；获取视听AR系统中的语音采集模块采集的第二语音信号；分析所述第一语音信号和所述第二语音信号，对比第一语音信号高频成分占比与预设阈值，得到分析结果；根据所述分析结果，处理所述第一语音信号和所述第二语音信号，得到处理结果；控制视听AR系统中的AR显示模块显示处理结果。本发明通过声源定位和语音文字转化技术将语音采集模块采集到的语音信号进行处理并显示处理结果，解决了听力障碍人士无法听到视野盲区的危险警示或者无法与人交谈的问题。

技术领域

本发明涉及增强现实领域，具体涉及一种多功能辅助视听的方法及系统。

背景技术

听力障碍人士的生活中往往出现很多困难和危险，比如与人交谈或者在车辆来往的马路上行走时都会有一些困扰或危险，听力障碍给他们带来的生活困境是需要解决的问题。

随着科技的进步，很多高科技产品出现在我们生活中，解决听力障碍人士的产品也层次不穷，例如我们现在经常见到的助听器，但是助听器长期佩戴会对耳朵带来严重的负担，并且助听器常常引进一些嘈杂的噪音，无法让听力障碍人士判断危险的方位或者听清对方的交谈。提供一种智能化的多功能辅助视听系统是我们急需解决的问题。

发明内容

本发明的目的在于提供一种多功能辅助视听的方法及系统，解决目前无法让听力障碍人士判断危险的方位或者听清对方的交谈问题。

为达到上述目的，本发明采取的技术方案是：

一种多功能辅助视听的方法，包括以下步骤：

第一步，获取至少三个视听采集系统中的语音采集模块采集的第一语音信号，获取至少三个视听采集系统的视频采集模块采集的视频信号；

第二步，获取视听AR系统中的语音采集模块采集的第二语音信号；

第三步，分析所述第一语音信号和所述第二语音信号，对比第一语音信号高频成分占比与预设阈值，得到分析结果；

第四步，根据所述分析结果，处理所述第一语音信号和所述第二语音信号，得到处理结果；

第五步，控制视听AR系统中的AR显示模块显示处理结果。

作为一种实施例，所述第一语音信号高频成分占比超过所述预设阈值，根据声源定位算法定位声源位置，并调取临近声源位置的视频采集模块采集到的所述视频信号叠加警示字符作为处理结果。

作为一种实施例，所述第一语音信号高频成分占比低于所述预设阈值且所述第二语音信号被采集到时，根据在线语音识别算法将语音信号转化为文字作为处理结果。

进一步的，所述声源定位算法为侦听各个所述视听采集系统中的语音采集模块的第一语音信号，利用各个所述视听采集系统中的语音采集模块采集到的第一语音信号的时间差定位声源。

进一步的，所述预设阈值为10％～20％。

本发明还公开一种多功能辅助视听的系统，包括中央处理模块、电源模块、至少三个视听采集系统和视听AR系统，所述视听采集系统包括语音采集模块和视频采集模块，所述语音采集模块和视频采集模块与所述中央处理模块通信连接，所述视听AR系统包括语音采集模块和AR显示模块，所述语音采集模块和AR显示模块与所述中央处理模块通信连接，所述电池模块与所述中央处理模块、所述至少三个视听采集系统和所述视听AR系统分别电性连接。

进一步的，所述至少三个视听采集系统不共线布置。

进一步的，所述视听AR系统设置在头部前方。

本发明与现有技术相比，具有如下的优点和有益效果：