[发明专利]心理行为识别方法、装置与存储介质

权利要求书

1.一种心理行为识别方法，其特征在于，包括：

检测预先采集的目标人脸图像的人脸特征，获取所述目标人脸图像的至少五个人脸特征点；

根据所述目标人脸图像的人脸特征点以及预设的图像分块规则，对所述目标人脸图像进行切块处理，得到若干个图块；

根据所述若干个图块，通过预先建立的卷积神经网络模型，获得所述目标人脸图像对应的情绪特征组合；

根据获得所述目标人脸图像对应的情绪特征组合，通过预先建立的心理行为识别模型，获得所述目标人脸图像对应的心理行为识别结果；

所述方法还包括：

根据所述若干个图块，通过所述卷积神经网络模型，识别所述人脸特征点中的不变形特征点以及变形特征点；其中，所述不变形特征点为所述人脸特征点中没有被所述卷积神经网络模型中神经元激活的点，所述变形特征点为所述人脸特征点中被所述卷积神经网络模型中的神经元激活的点；

根据所述人脸特征点中的变形特征点，在所述目标人脸图像上建立多条第二图像切分线；

按照所述图像分块规则，从所述多条第二图像切分线中提取M条第二图像切分线，并采用提取所得的M条第二图像切分线对所述目标人脸图像切块处理；其中，M3；

历遍所述多条第二图像切分线，共获得若干个变形特征点图块；

根据所述若干个变形特征点图块，通过所述卷积神经网络模型，获得所述目标人脸图像对应的优化情绪特征组合，并将当前情绪特征组合更新为所述优化情绪特征组合。

2.如权利要求1所述的心理行为识别方法，其特征在于，所述根据所述目标人脸图像的人脸特征点以及预设的图像分块规则，对所述目标人脸图像进行切块处理，得到若干个图块，具体包括：

根据所述人脸特征点在所述目标人脸图像上建立多条第一图像切分线；

按照预设的图像分块规则，从所述多条第一图像切分线中提取N条第一图像切分线，并采用提取所得的N条第一图像切分线对所述目标人脸图像切块处理；其中，N3；

历遍所述多条第一图像切分线，共获得若干个图块。

3.如权利要求1所述的心理行为识别方法，其特征在于，所述根据所述若干个图块，通过预先建立的卷积神经网络模型，获得所述目标人脸图像对应的情绪特征组合，具体包括：

对所述若干个图块进行灰度化处理，得到若干个灰度化图块；

对所述若干个图块进行水平翻转处理，得到若干个水平翻转图块；

将所述若干个图块、所述若干个灰度化图块以及所述若干个水平翻转图块输入到所述卷积神经网络模型进行卷积计算，获得所述目标人脸图像对应的特征向量，并对所述特征向量进行PCA降维处理；

根据降维后的特征向量，通过所述卷积神经网络模型中的多层分类器，获得所述目标人脸图像对应的情绪特征组合。

4.如权利要求1所述的心理行为识别方法，其特征在于，所述根据所述目标人脸图像的人脸特征点以及预设的图像分块规则，对所述目标人脸图像进行切块处理，得到若干个图块之前，所述方法还包括：

根据所述人脸特征点，所述对所述目标人脸图像进行对齐处理。

5.如权利要求1或2所述的心理行为识别方法，其特征在于，所述若干个图块包括：包含双眼特征的第一图块、包含双眼特征和鼻子特征的第二图块、包含左眼特征与左鼻翼特征的第三图块、包含右眼特征与右鼻翼特征的第四图块、包含鼻子特征和嘴巴特征的第五图块、包含左鼻翼特征与左嘴角特征的第六图块、包含右鼻翼特征与右嘴角特征的第七图块、包含眉眼特征的第八图块、包含嘴巴特征的第九图块以及包含全脸特征的第十图块。

6.如权利要求1所述的心理行为识别方法，其特征在于，所述心理行为识别模型的构建过程包括如下步骤：

根据预先采集的图像训练样本，通过所述卷积神经网络模型，获得所述图像训练样本对应的情绪特征组合；

对所述图像训练样本对应的情绪特征组合进行心理行为信息标注；

利用标注后的图像训练样本对应的情绪特征组合，对预先建立的深度神经网络进行情绪组合训练，得到所述心理行为识别模型。