[发明专利]一种基于视觉信息的盲人辅助导航方案

说明书

本发明公开了一种基于视觉信息的盲人辅助导航方案，包括数据采集设备、个人智能设备和服务提供商数据中心；所述数据采集设备通过激光测距扫描、深度摄像头和传统光学摄像头拍摄获取环境自然环境三维信息；获取后的三维信息发送至个人智能设备中进行融合，在个人智能设备上实现其所处环境的三维信息构建，并将该三维信息变换成语言信息传递给盲人；同时个人智能设备将采集的数据和演变的模型上传到服务提供商数据中心，服务提供商数据中心采集和整合盲人处数据和模型，反馈给个人智能设备并将三维信息变换成语音传递给盲人；本发明解决了如下问题，自然环境下的多目标识别，自然环境下的大动态三维信息重建，场景三维信息到语音信息的变换。

技术领域

本发明涉及一种基于视觉信息的盲人辅助导航方案，属于盲人辅助导航技术领域。

背景技术

随着人工智能技术的发展，使用多摄像头采集到的视觉信息进行深加工，推算出对人类生活更有意义的信息成为可能，特别是深度学习技术的发展，使其成为一种特别有效的手段和方法。基于深度学习的盲人的辅助导航技术是在健康中国大战略下的研发热点之一，是人工智能技术和医养大健康交叉的融合点之一，是利用信息技术撬动健康领域的支点之一。

虽然人工智能技术与医养健康融合是未来的发展趋势之一，现依然存在一些急需解决的问题：

1、自然环境下的多目标识别；

当盲人行走在街道时，摄像头获取的街道场景是自然环境下的视觉数据，该类数据存在大范围变化的遮挡、透视、光照等多因素干扰，使得在该场景下的多目标识别是一件很困难的工作。

2、自然环境下的大动态三维信息重建；

为了更有效的为盲人提供辅助导航，需要对其所处环境构建三维信息场，在实际自然场景下，其中涉及的目标包括静止的街景(例如：街道两侧的商店及其相应的铭牌)、中低速运行目标(例如：行走的人和骑行的自行车)和高速运行目标(例如：行驶中的汽车)。对于大动态的三维场景的构建，不仅需要众多的大型数据集和模型，还需要针对不同的目标推算其众多不同的属性，包括绝对属性(例如：目标的大小，颜色)和相对属性(例如：盲人与各目标的距离、相对速度等)。

3、来自不同数据采集设备的多数据整合；

盲人辅助导航系统需要处理大动态场景，所以需要使用不同的多数据采集设备，甚至包括激光扫描和测距设备，整合异构数据是一项比较困难的工作，其中包括数据融合、过滤和一致性表示等。

4、不利于自助机设备外观优化；

在盲人辅助导航设备上安装多数据采集设备，增加了设备微型化的困难且外观不易优化。

发明内容

针对上述存在的技术问题，本发明的目的是：提出了一种基于视觉信息的盲人辅助导航方案。

本发明的技术解决方案是这样实现的：一种基于视觉信息的盲人辅助导航方案，包括数据采集设备、个人智能设备和服务提供商数据中心；所述数据采集设备通过激光测距扫描、深度摄像头和传统光学摄像头拍摄获取环境自然环境三维信息；获取后的三维信息发送至个人智能设备中进行融合，在个人智能设备上实现其所处环境的三维信息构建，并将该三维信息变换成语言信息传递给盲人；同时个人智能设备将采集的数据和演变的模型上传到服务提供商数据中心，服务提供商数据中心采集和整合盲人处数据和模型，反馈给个人智能设备并将三维信息变换成语音传递给盲人；数据采集设备和个人智能设备形成一个小的内部的信息闭环；个人智能设备和服务提供商数据中心形成一个大的外部的信息闭环，在小的内部闭环中计算盲人所处环境的时空信息，并给出相应的时空提示，在大的外部闭环中，实现数据整合和模型演变。

优选的，所述数据采集设备为特殊眼镜；所述特殊眼镜带有激光测距扫描、摄像头和音频播放设备。

优选的，所述个人智能设备为手机。