[发明专利]一种集成面部肌肉和肢体活动的特征情绪检测方法

说明书

本发明公开了一种集成面部肌肉和肢体活动的特征情绪检测方法，包括以下步骤：S1、在脸部表情活动幅度大的肌肉位置黏附红外传感器，在人肢体活动幅度大的肌肉位置黏附光学惯性传感器；S2、VR设备中虚拟各种不同游戏场景或音频或文字；S3、红外传感器检测到每个脸部肌肉的运动，同时VR内置的瞳孔检测器检测瞳孔的收缩情况，通过光学惯性传感器，实时捕捉人肢体关节的动作，得到肢体关节运动信息参数数据；S4、导出实时脸部、肢体关节运动数据以及瞳孔收缩数据；S5、与数据库中亢奋、兴奋状态下的数据范围进行对比分析，分析出被测人员沉浸的程度。通过VR激发被测试者的潜在兴趣，判断评测被测人员沉浸不同游戏场景或音频或文字的程度。

技术领域

本发明涉及智能分析技术领域，尤其涉及一种集成面部肌肉和肢体活动的特征情绪检测方法。

背景技术

随着计算机视觉和多媒体技术的进步，智能情绪识别分析已是目前计算机视觉中最活跃的研究领域之一。其目的是对人类的图像序列进行检测、跟踪和识别，更科学地解释人类行为。情绪识别可以应用于生活的各个方面：游戏厂商可以智能分析玩家的情绪，根据不同表情针对性地和玩家交互，提高游戏的体验；相机厂商可以利用该项技术捕捉人类表情，比如当需要一张微笑或者生气的照片时，可以捕获被拍人员的面部表情并快速完成拍照工作；政府或社会学家可以在公共场合安装摄像头，分析整个社会群体的表情和肢体动作以了解人们的生活工作压力；商厦可以根据顾客对商品的购物时的动作及表情视频，对产品做相关的市场调查。

在实际应用中，单纯基于人脸表情的情绪识别研究已遇到瓶颈，一方面，基于实验室视角的正面人脸表情识别已达到极高识别率，但相关算法在应用于自然态人脸表情识别时却识别率较低；另一方面，肢体动作同样是人们获取社交和情绪的重要线索之一，在很多应用场合中，能够为基于面部表情的情绪识别提供有效的帮助。因此，开展融合面部表情和肢体动作的情绪识别研究对今后人类情感智能识别相关应用的发展具有重要价值。

发明内容

本发明克服了现有技术的不足，提供一种集成面部肌肉和肢体活动的特征情绪检测方法。

为达到上述目的，本发明采用的技术方案为：一种集成面部肌肉和肢体活动的特征情绪检测方法，为一种基于VR虚拟互动的脸部肌肉采集和肢体运动数据采集的方法，其特征在于，所述分析方法，包括以下步骤：

S1、黏附与佩戴：在脸部表情活动幅度大的肌肉位置黏附红外传感器，在人肢体活动幅度大的肌肉位置黏附光学惯性传感器，并将VR设备佩戴于头部；

S2、VR虚拟：VR设备中虚拟各种不同游戏场景或音频或文字；

S3、表情和肢体运动：红外传感器检测到每个脸部肌肉的运动，同时VR内置的瞳孔检测器检测瞳孔的收缩情况，同时人体肢体活动运动时，通过光学惯性传感器，实现关节节点的具体定位，光学惯性传感器反射光信号至摄影设备，从而实时捕捉人肢体关节的动作，得到肢体关节运动信息参数数据，同时，摄影设备拍摄图像信息；

S4、导出运动数据：导出实时脸部肌肉运动数据、实时肢体关节运动数据以及瞳孔收缩的数据并进行聚合分析；

S5、沉浸程度分析：与数据库中亢奋、兴奋状态下的脸部肌肉运动数据范围、肢体关节运动数据范围进行对比分析，分析出被测人员沉浸入VR游戏或音频或文字的程度。

本发明一个较佳实施例中，对不同年龄段、不同性别的被测人员测试不同VR游戏场景或音频或文字，得到不同年龄段、不同性别对于不同VR游戏或音频或文字的沉浸程度。

本发明一个较佳实施例中，至少在上臂部、手肘部、手腕部、臀部、大腿部、膝盖部、小腿部以及脚腕部黏附所述光学惯性传感器。

本发明一个较佳实施例中，每间隔预设时长切换不同类型的VR备虚拟游戏或音频或文字，以检测同一被测人员沉浸入不同VR备虚拟游戏或音频或文字的程度。