[发明专利]一种基于视频流的人脸表情幻想方法

摘要

本发明公开了一种基于视频流的人脸表情幻想技术用来根据一张输入的中性人脸表情图像合成相应的多种表情序列。算法步骤为：1)手工从输入人脸图像中选择人脸兴趣子区域；2)计算其在样本空间中的k近邻以及相应的m维特征坐标；3)用近邻的m维坐标和特征表示训练径向基函数；4)以输入图像的坐标作为径向基函数的输入得到对应的特征表示，进而逐帧合成人脸兴趣子区域的动态序列；5)将合成的动态序列逐帧移植到输入的中性人脸表情图像上得到最终表情效果。本发明提供的人脸表情幻想技术能够根据一幅图像快速产生丰富合理的多种动态表情序列，具有极大的创新性，并在人机交互、电影制作和游戏娱乐等方面有较高的应用价值。

主权项

1.一种基于视频流的人脸表情幻想方法，其特征在于方法包括训练阶段和测试阶段两个阶段，训练阶段为捕获多种表情训练视频，对表情视频的每一帧手工切分出感兴趣的人脸兴趣子区域，这些构成一个子区域视频序列，采用主成分分析提取每段子区域视频的特征表示ER，ER将在测试阶段用来合成新的表情序列；测试阶段包括如下步骤：1)手工从输入人脸图像中选择人脸兴趣子区域作为算法输入Iin，一幅人脸图像的兴趣子区域是最能反映表情特征的子区域，分为眼睛区域和嘴巴区域两块；2)选择每段训练子区域视频的第一帧作为样本空间，计算Iin在样本空间中的k近邻Inb 以及相应的m维特征空间中的坐标Yin和Ynb；3)选择与Ynb对应的特征表示ERnb并用Ynb和ERnb训练径向基函数，得到低维特征空间与视频特征表示之间的映射关系；4)将Yin作为输入，利用径向基函数回归得到与Iin对应的特征表示EPin；5)利用合成的特征表示ERin逐帧合成人脸兴趣子区域的动态序列，将此子区域逐帧移植到输入的中性人脸图像获得最终合成的动态表情序列。