[发明专利]基于影像的盲人远程协助方法及系统在审
申请号: | 202010052197.9 | 申请日: | 2020-01-17 |
公开(公告)号: | CN111263001A | 公开(公告)日: | 2020-06-09 |
发明(设计)人: | 朱文俊;许煌志 | 申请(专利权)人: | 深圳市春盛海科技有限公司 |
主分类号: | H04M1/725 | 分类号: | H04M1/725;H04L29/06;H04L29/08 |
代理公司: | 深圳市创富知识产权代理有限公司 44367 | 代理人: | 涂柳晓 |
地址: | 518000 广东省深圳市南山*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 影像 盲人 远程 协助 方法 系统 | ||
1.一种基于影像的盲人远程协助方法,其特征在于,应用于基于影像的盲人远程协助系统,所述系统包括受助者终端、协助者终端和云服务器,所述受助者终端、协助者终端分别与云服务器通信连接,所述方法包括:
基于所述受助者终端生成携带协助信息的协助指令,通过所述受助者终端将所述协助指令发送至所述云服务器,以指示所述云服务器根据所述协助信息呼叫与所述云服务器预先关联的协助者终端;
基于所述协助者终端生成响应指令,并通过所述云服务器建立所述协助者终端与所述受助者终端之间的通信连接;
所述受助者终端根据所述响应指令获取盲人所处环境的影像信息及音频信息,将所述影像信息及音频信息发送至所述协助者终端,所述协助者终端根据所述影像信息及音频信息为盲人提供协助。
2.根据权利要求1所述的方法,其特征在于,所述受助者终端包括协助按钮和麦克风;所述基于所述受助者终端生成携带协助信息的协助指令,包括:
当接收到作用在所述受助者终端的协助按钮的输入操作时,根据所述麦克风获取待协助的盲人发出的协助信息,生成携带所述协助信息的协助指令。
3.根据权利要求2所述的方法,其特征在于,所述受助者终端还包括SoC芯片,所述SoC芯片分别与所述协助按钮、麦克风电连接;
所述通过所述受助者终端将所述协助指令发送至所述云服务器,以指示所述云服务器根据所述协助信息呼叫与所述云服务器预先关联的协助者终端,包括:
基于所述SoC芯片中的网络通讯功能将所述协助指令发送至所述云服务器;
所述云服务器识别所述协助指令中的协助信息后,将所述协助信息同时传达至多个与所述云服务器建立通讯连接的协助者终端。
4.根据权利要求3所述的方法,其特征在于,所述协助者终端上安装有预设应用程序,所述基于所述协助者终端生成响应指令,并通过所述云服务器建立所述协助者终端与所述受助者终端之间的通信连接,包括:
基于所述协助者终端上的预设应用程序显示所述协助信息,获取最先响应所述协助信息的协助者终端生成的响应指令;
通过所述最先响应所述协助信息的协助者终端将所述响应指令发送至所述云服务器,以指示所述云服务器建立所述最先响应所述协助信息的协助者终端与所述受助者终端之间的通信连接。
5.根据权利要求4所述的方法,其特征在于,所述受助者终端还包括影像模块和扬声器,所述影像模块、扬声器分别与所述SoC芯片电连接;
所述受助者终端根据所述响应指令获取盲人所处环境的影像信息及音频信息,将所述影像信息及音频信息发送至所述协助者终端,所述协助者终端根据所述影像信息及音频信息为盲人提供协助,包括:
当所述受助者终端与协助者终端建立通信连接后,基于所述受助者终端上的影像模块获取盲人所处环境的影像信息,基于所述受助者终端上的麦克风获取盲人所处环境的音频信息;
通过所述SoC芯片将所述影像信息及音频信息发送至所述协助者终端,所述协助者终端根据所述影像信息及音频信息返回协助语音,基于所述受助者终端上的扬声器播放所述协助语音,以实现对盲人的协助。
6.根据权利要求5所述的方法,其特征在于,所述协助者终端根据所述影像信息及音频信息为盲人提供协助,还包括:
基于所述影像模块获取所述影像信息的距离数据、方向数据和角度数据,将携带所述距离数据、方向数据和角度数据的影像信息发送至所述协助者终端,以使得所述协助者终端根据所述影像信息为盲人提供协助。
7.根据权利要求1所述的方法,其特征在于,所述方法还包括:
当接收到作用在所述受助者终端的协助按钮的中断操作时,中断所述受助者终端与所述协助者终端之间的通信连接;
当接收到所述协助者终端发出的中断指令时,中断当前协助者终端与所述受助者终端之间的通信连接,通过所述云服务器建立所述受助者终端与另一个协助者终端之间的通信连接。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市春盛海科技有限公司,未经深圳市春盛海科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010052197.9/1.html,转载请声明来源钻瓜专利网。