[发明专利]基于虚拟代理交互的虚拟训练系统与方法

摘要

本发明公开了一种基于虚拟代理交互的虚拟训练系统与方法，本发明允许用户根据自身需求或训练目标选择不同的交互类型、不同情境和不同性格特征的虚拟提问者进行面试训练，能满足多样性的焦虑情境呈现和个性化训练需求；利用3D眼镜和立体投影呈现仿真的虚拟训练环境，通过蓝牙耳机与虚拟提问者直接语音交互来实现自然、沉浸式的面试体验；在面试过程中进行多模态感知，包括动作识别、情感识别和生理状态识别，以此来更好地了解用户的面试状态。本系统不需要昂贵的虚拟现实设备，用户通过多次训练即可有效地降低焦虑，提高交流技能。

主权项

1.一种基于虚拟代理交互的虚拟训练系统，其特征是：包括：人脸识别模块，被配置为对用户身份进行识别；面试情景选择模块，被配置为进行类型选择和会议室场景选择；情感识别模块，被配置为利用网络摄像头实时识别用户情绪状态；动作识别模块，被配置为利用Kinect识别用户情景交互过程中的动作；生理信号识别模块，被配置为通过生理信号传感器集用户的皮肤电、心电和脑电生理数据并进行实时分析以此得出用户情绪状态以及专注度；交互模块，被配置为实现用户与虚拟提问者的交互，完成模拟情景，识别和记录用户的作答以及状态，并据此与用户进行反应和互动，完成模拟情景训练过程；反馈模块，被配置为通过可视化图表的方式直观地反馈用户整个问答过程的表情管理表现，以及训练中的专注度和焦虑程度量化值。