[发明专利]表情识别方法、装置及系统

权利要求书

1.一种表情识别方法，其特征在于，包括：

获取待识别的人脸图像；

提取所述人脸图像的全局特征，得到所述人脸图像的语义特征图；

基于注意力机制对所述人脸图像进行特征提取，得到所述人脸图像的注意力特征图；

对所述语义特征图和所述注意力特征图进行融合，得到融合特征图；

对所述融合特征图进行表情识别，得到表情识别结果。

2.根据权利要求1所述的方法，其特征在于，所述基于注意力机制对所述人脸图像进行特征提取，得到所述人脸图像的注意力特征图的步骤，包括：

对所述人脸图像执行注意力掩膜操作，得到所述人脸图像对应的增强图像；其中，所述人脸图像中的人脸关键点与非人脸关键点之间的亮度差值在所述增强图像中增加；

提取所述增强图像中的全局特征，得到所述人脸图像的注意力特征图。

3.根据权利要求2所述的方法，其特征在于，所述对所述人脸图像执行注意力掩膜操作，得到所述人脸图像对应的增强图像的步骤，包括：

将所述人脸图像切分为多个区域图像；

基于相关系数法确定每个所述区域图像相对于所述人脸图像的第一权值；

基于曼哈顿距离法确定所述人脸图像中的人脸关键点相对于所述人脸图像的第二权值；

根据所述第一权值和所述第二权值确定注意力掩膜矩阵；

对所述注意力掩膜矩阵与所述人脸图像执行点乘操作，得到所述人脸图像对应的增强图像。

4.根据权利要求3所述的方法，其特征在于，所述基于相关系数法确定每个所述区域图像相对于所述人脸图像的第一权值的步骤，包括：

获取所述人脸图像的像素点的第一概率分布图；其中，所述第一概率分布图中包含有人脸图像像素点在预设角度区间中的分布概率；

获取每个所述区域图像的像素点的第二概率分布图；其中，所述第二概率分布图中包含有区域图像像素点在预设角度区间中的分布概率；基于所述第一概率分布图和所述第二概率分布图确定每个所述区域图像相对于所述人脸图像的第一权值。

5.根据权利要求4所述的方法，其特征在于，所述获取所述人脸图像的像素点的第一概率分布图的步骤，包括：

计算所述人脸图像的图像梯度值；

根据所述图像梯度值获取所述人脸图像像素点的角度值；确定每个所述人脸图像像素点的角度值所在的角度区间；

计算每个所述角度区间内的人脸图像像素点的分布概率，得到所述第一概率分布图。

6.根据权利要求4所述的方法，其特征在于，所述基于所述第一概率分布图和所述第二概率分布图确定每个所述区域图像相对于所述人脸图像的第一权值的步骤，包括：

基于所述第一概率分布图、所述第二概率分布图和权值计算公式，确定每个所述区域图像相对于所述人脸图像的第一权值；其中，所述权值计算公式为：

其中，i为区域图像的编号，γ_i为区域图像i的第二概率分布图中所包含的区域图像像素点在预设角度区间中的分布概率，y为所述第一概率分布图中所包含的人脸图像像素点在预设角度区间中的分布概率，ρ_i为区域图像i相对于所述人脸图像的第一权值，D₀为y的方差，D_i为γ_i的方差。

7.根据权利要求3所述的方法，其特征在于，所述基于曼哈顿距离法确定所述人脸图像中的人脸关键点相对于所述人脸图像的第二权值的步骤包括：

对于所述人脸图像上的每个人脸关键点均执行如下操作：获取以当前的人脸关键点为中心的指定邻域框；计算所述当前的人脸关键点与所述指定邻域框内的每个像素点之间的曼哈顿距离值；

基于各所述人脸关键点对应的曼哈顿距离值，确定各所述人脸关键点相对于所述人脸图像的第二权值矩阵。