[发明专利]一种基于WebRTC的机器人远程通话系统

说明书

本发明公开了一种基于WebRTC的机器人远程通话系统，包括客户端、信令服务、消息服务和机器人。客户端通过信令服务和消息服务主动与机器人建立点对点连接，传输音视频流，播放视频和语音；信令服务负责存储、转发客户端和机器人的消息，维护客户端与机器人的映射关系；消息服务接收客户端发布的身份ID、信令服务地址等信息，供机器人订阅，支持MQTT和HTTP协议；机器人通过信令服务和消息服务与客户端建立点对点连接，传输音视频流，播放视频和语音。本发明不但支持客户端与机器人的建立音视频通话，还支持通话的断线自动重连、机器人忙碌等待、机器人音视频显示可配置，信令服务支持多组一对一的客户端与机器人通话。

技术领域

本发明属于机器人技术领域，具体地涉及一种基于WebRTC的机器人远程通话系统。

背景技术

随着机器人技术的日益进步，机器人的智能控制技术得到了长足发展，在深空探测、深海探测、智能物流、自主导览等场景下都有着重要作用，但当前的机器人依然无法完全满足在复杂场景下的自主移动作业需求，为了更好的应对复杂场景，机器人一般会带有人工控制移动的功能。在人工控制机器人移动时，需要通与机器人进行实时音视频通话，进而根据实际情况来操作机器人。

目前机器人的实时音视频通话一般通过安装软件或者浏览器插件的方式进行，对于很多用户来说，插件的下载、软件的安装和更新是复杂且容易出现问题的。

发明内容

针对现有技术的不足，本发明提供了一种基于WebRTC的机器人远程通话系统。该远程通话系统的客户端可以在浏览器内与机器人进行音视频通话，通话异常中断后会自动重连；信令服务可以维护多组客户端与机器人的一对一通话，实时监测通话连接是否正常；机器人启动后即开始监听音视频通话连接，通话结束后会继续监听新的连接，通话时不依赖浏览器，并支持忙碌等待。

为实现本发明的目的，本发明采用如下技术方案：一种基于WebRTC的机器人远程通话系统，所述机器人远程通话系统包括：客户端、信令服务、消息服务和机器人，所述客户端和机器人均安装有摄像头、音响、麦克风、显示器，所述客户端使用支持WebRTC的浏览器通过信令服务与消息服务主动与机器人建立音视频通话，并且支持通话的断线自动重连；所述信令服务用于存储、转发客户端和机器人的消息，维护多组客户端与机器人的1对1映射关系；所述消息服务用于接收客户端发布的身份ID、信令服务地址等信息，供机器人订阅，支持MQTT和HTTP协议；所述机器人通过信令服务器和消息服务与客户端建立点对点连接，传输音视频流，播放视频和语音。

进一步地，所述信令服务通过WebSocket连接与客户端和机器人通信，当信令服务器与客户端和机器人任意一方的连接中断时，会自动断开与另一方的WebSocket连接，并清理保存的客户端与机器人信息及映射关系。

进一步地，所述客户端通过HTTP协议发布身份ID、信令服务地址信息到消息服务，机器人通过MQTT协议订阅客户端身份ID、信令服务地址信息。

进一步地，所述机器人使用Gstreamer的WebRTC插件，通过信令服务器和消息服务与客户端建立音视频通话；通话时不使用浏览器，通话界面可根据需要配置为隐藏或显示；当机器人正处于通话中时，新的通话请求会被拒绝。

与现有技术相比，本发明具有如下有益效果：

1.客户端可在浏览器上输入机器人编号与指定的机器人进行音视频通话，无需安装任何插件，在检查到通话因异常而中断时会自动与机器人进行重连。

2.信令服务支持多组客户端与机器人1对1音视频通话，可以通过与客户端及机器人之间的Websokcet连接监测通话是否已经结束。

3.引入消息服务后，客户端只需指定进行通话的机器人ID，消息服务就会向这个机器人发送建立通话连接所需的信息，消除了机器人IP频繁变化带来的麻烦。