[发明专利]一种增强现实环境中的脑眼协同控制方法及系统

摘要

一种增强现实环境中的脑眼协同控制方法及系统，针对航天员便携式作业需求，进行头盔显示器与视点跟踪式眼动仪的结构一体化设计，首先开发与数字头盔相匹配的集成嵌入式增强现实作业环境，实现基于眼动跟踪的机械臂自由度选择和动作预选，然后通过对脑机接口稳态视觉诱发范式控制信息的识别，实现机械臂六自由度控制动作的稳定意图理解和精细控制，最后在数字集成头盔条件下，实现脑电信号与视觉跟踪信号对被控对象的协同控制。与现有技术相比，本发明解决了单纯脑电信号控制能力较弱、鲁棒性和稳定不足的问题，具有很好的使用价值。

主权项

一种增强现实环境中的脑眼协同控制方法，其特征在于包括如下步骤：(1)构建一体化结构的头盔显示器、视点跟踪式眼动仪，得到数字头盔；所述的数字头盔能够集成眼动跟踪和增强现实模块，提供增强现实下的航天器作业场景；所述的头盔显示器能够提供对增强现实场景的显示功能；所述的视点跟踪式眼动仪能够实现对眼球转动、凝视动作的跟踪，实现眼动控制；(2)构建与数字头盔匹配的且能够增强现实作业环境的集成嵌入式装置；(3)根据视点跟踪式眼动仪读取视觉跟踪信号实现基于眼动跟踪的机械臂自由度选择、动作预选，然后根据数字头盔中的脑机接口读取脑电信号实现机械臂六自由度修正、动作控制。