[发明专利]一种基于多模人机传感信息同步采集与融合的控制方法

摘要

本发明涉及人机混合智能交互控制领域，特别涉及一种基于多模态脑眼信息融合的移动式同步采集与融合的控制方法。针对人体生理信息采集要求，利用视觉跟踪与脑机接口技术，采集人体的视觉和意识信号，作为多模态信息通道的输入；开发基于数字头盔的增强现实环境，设计基于事件触发的集成采样接口，实现信息流的移动式同步采集与输出；利用ReliefF评估和诱导有序信息集结算子，实现人体生理信息在特征层和权重层的融合；在数字头盔集成条件下，实现多模信息状态下对被控对象的对指令集协同控制。本发明解决了现有技术中存在的人机交互信息表征鲁棒性、稳定性不足的问题。

主权项

1.一种基于多模人机传感信息同步采集与融合的控制方法，其特征在于该方法的步骤包括：第一步，使用视觉对控制信息进行采集，得到视觉控制信息；第二步，使用脑机接口对控制信息进行采集，得到脑机接口控制信息；第三步，对第一步得到的视觉控制信息和第二步得到的脑机接口控制信息进行融合，得到融合后的特征子集；第四步，将第三步得到的融合后的特征子集作为输入控制信号，实现在增强现实环境下的待控制目标的实时控制。