[发明专利]人脸表情信息的提取方法及处理

摘要

本发明一种人脸表情信息的提取方法及处理，包括有人脸表情信息的提取方法和人脸表情信息的处理，该人脸表情信息的提取方法是：通过诱导被试者表达各种设定的单一表情、混合表情和复杂表情，采用两个摄像头分别提取被试者表情的正面和侧面视频数据。该人脸表情信息的处理是：将单一表情视频通过人脸检测器输出人脸图像，通过将AdaBoost算法生成的强分类器的输出由二值改为连续实数值改进为专门表情分类器，由多个专门表情分类器对人脸图像分类并进行判决，给出最终表情类型。

主权项

1、一种人脸表情信息的提取方法，其特征在于：该提取方法步骤如下：步骤1：针对人机交互的情感需求设计的，设计实验场景为背景比较复杂的实验室，光照条件为头顶日光灯照并且受自然光影响，并允许有其它人的出现，但不能主动影响被试者的情感表达，被试者被要求坐在一台计算机前，被试者的正前方和以正前方为基准的约30度的右侧方处固定两个连接到计算机的普通PC摄像头以摄录被试者的表情，摄像头与被试者的距离约为0.5-0.8米；步骤2：被试者被要求自然的表达一个指定的表情，指定表情的顺序为18种单一表情、3种混合表情和4种复杂表情，被试者在表达面部表情时可以轻微的移动头部，但需要基本保持正面面对正前方的摄像头，被试者的穿着和发型也不受任何约束；步骤3：如果被试者难于表达指定的表情，实验者会应用各种提示对其进行诱导，使被试者对指定的表情有更深刻的理解，以更好的表达指定的表情；诱导方式为：①实验者向被试者展示由表情素描、日本女性入脸表情数据库中的典型表情图片、虚拟场景描述、潜台词或独自构成的幻灯片；②实验者向被试者演示前期录制的较成功的表情视频；③实验者向被试者现场示范部分表情；步骤4：实验者发出口令指示被试者表达指定的表情，并和助手控制两个摄像头同步进行摄录，直到被试者表达完毕以口令结束录像；对每个表情采集的视频数据存储为音频视频交错格式，640*480像素，24位彩色，帧率为30帧/秒，持续约6秒；步骤5：当被试者的表达不够理想时，重复步骤3和4，但重复的次数不宜过多；步骤6：对下一个指定的表情进行步骤2到6的操作，直到被试者将25种表情表达完毕；步骤7：用Adobe公司的视频处理软件Premiere将每段视频剪辑成约2秒的表情视频。