[发明专利]导盲方法、导盲装置、导盲设备及计算机可读存储介质在审
申请号: | 202110245928.6 | 申请日: | 2021-03-05 |
公开(公告)号: | CN113032521A | 公开(公告)日: | 2021-06-25 |
发明(设计)人: | 郑健彦;潘建宁;郭销淳;毛茂德 | 申请(专利权)人: | 广州虎牙科技有限公司 |
主分类号: | G06F16/33 | 分类号: | G06F16/33;G06F16/332;G06F16/387;G06K9/00;G06T7/70;A61H3/06 |
代理公司: | 深圳市威世博知识产权代理事务所(普通合伙) 44280 | 代理人: | 黎坚怡 |
地址: | 511400 广东省广州市番禺*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 方法 装置 设备 计算机 可读 存储 介质 | ||
1.一种导盲方法,其特征在于,所述导盲方法包括:
基于用户的语音信息,识别出所述用户的待找寻目标;
从数据库中查找出所述待找寻目标的位置信息,并计算所述待找寻目标与预设的目标的相对位置;
检测所述用户与所述待找寻目标之间是否有障碍物;
若检测到所述障碍物,通过语音播报所述相对位置和所述障碍物的信息。
2.根据权利要求1所述的导盲方法,其特征在于,所述若检测到所述障碍物,通过语音播报所述相对位置和所述障碍物的信息的步骤之后,所述导盲方法还包括:
通过语音向所述用户播报行走指引,以引导所述用户进行取物。
3.根据权利要求2所述的导盲方法,其特征在于,所述检测所述用户与所述待找寻目标之间是否有障碍物,包括:
检测所述用户与所述待找寻目标的直线上,所述用户的预设距离内是否有障碍物;
所述通过语音向所述用户播报行走指引,以引导所述用户进行取物,包括:
当确认所述用户与所述障碍物之间的距离小于预设距离时,通过语音向所述用户播报所述行走指引。
4.根据权利要求1所述的导盲方法,其特征在于,所述障碍物的信息包括:所述障碍物相对所述预设的目标的位置信息、所述障碍物的种类和所述障碍物与所述用户之间的距离中的至少一种。
5.根据权利要求1所述的导盲方法,其特征在于,所述基于用户的语音信息,识别出所述用户的待找寻目标的步骤之前,所述导盲方法还包括:
获取所述用户的所述语音信息;
根据所述语音信息判断所述用户是否需要识别物品;
若确认所述用户需要识别物品,则识别所述用户的待识别目标,并将识别结果通过语音播报给所述用户;
若确认所述用户不需要识别物品,则进一步确认所述用户是否需要寻找物品;
若确认所述用户需要寻找物品,则执行基于用户的语音信息,识别出所述用户的待找寻目标的步骤。
6.根据权利要求5所述的导盲方法,其特征在于,所述识别所述用户的待识别目标,包括:
获取第一图像,所述第一图像中包括有所述用户的所述待识别目标,
通过深度学习模型从所述第一图像中识别所述待识别目标。
7.根据权利要求1所述的导盲方法,其特征在于,所述从数据库中查找出所述待找寻目标的位置信息的步骤之前,所述导盲方法还包括:
通过摄像头获取所述用户所处的环境的图像;
通过深度学习模型从所述图像中获取所述环境内的物品的信息,并将所述物品的信息存储到所述数据库中,其中所述物品的信息包括所述物品的名称和所述物品的位置信息。
8.根据权利要求1所述的导盲方法,其特征在于,所述通过语音播报所述相对位置和所述障碍物的信息的步骤之后,所述导盲方法还包括:
所述用户行走的过程中,获取所述用户的位置信息,并根据所述用户的位置信息和所述待找寻目标的位置信息,计算所述待找寻目标与所述用户之间的距离;
当确认所述待找寻目标与所述用户之间的距离逐渐增大,则提醒所述用户。
9.一种导盲装置,其特征在于,所述导盲装置包括:
识别模块,用于基于用户的语音信息,识别出所述用户的待找寻目标;
查找模块,用于从数据库中查找出所述待找寻目标的位置信息,并计算所述待找寻目标与预设的目标的相对位置;
检测模块,用于检测所述用户与所述待找寻目标之间是否有障碍物;
播报模块,用于在所述检测模块检测到所述障碍物时,通过语音播报所述相对位置和所述障碍物的信息。
10.一种导盲设备,其特征在于,包括相互耦接的存储器和处理器,所述处理器用于执行所述存储器中存储的程序指令,以实现如权利要求1至8任一项所述的导盲方法。
11.一种计算机可读存储介质,其上存储有程序指令,其特征在于,所述程序指令被处理器执行时实现如权利要求1至8任一项所述的导盲方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州虎牙科技有限公司,未经广州虎牙科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110245928.6/1.html,转载请声明来源钻瓜专利网。