[发明专利]基于多模态感觉数据远程控制机器人平台

摘要

本公开涉及基于多模态感觉数据远程控制机器人平台。本公开提供用于远程控制在不适合直接人类操作的受限空间或其他类似空间中的机器人平台的方法和系统。使用多模态感觉数据来实现控制，多模态感觉数据包括至少两种感觉响应类型，诸如双目立体视觉类型、双耳立体声音频类型、力反射触觉操纵类型、触觉类型等。多模态感觉数据由定位在受限空间中的机器人平台获得，并且被传送到受限空间外部的远程控制站，其中多模态感觉数据用于生成受限空间的表示。多模态感觉数据可以被用于为远程控制站的操作者提供多感觉高保真度远程呈现并且允许操作者提供更准确的用户输入。该输入可以被传送到机器人平台以在受限空间内执行各种操作。

主权项

一种用于基于多模态感觉数据(272)远程控制机器人平台(230)的方法(300)，所述方法(300)包括：定位(310)所述机器人平台(230)，将所述机器人平台(230)通信地耦连到远程控制站(250)；使用所述机器人平台(230)的两个或更多个传感器(510)获得(314)所述多模态感觉数据(272)，所述多模态感觉数据(272)包括至少两种感觉响应类型；传送(320)所述多模态感觉数据(272)的至少一部分；以及在所述机器人平台(230)处从所述远程控制站(250)接收(330)远程控制指令。