[发明专利]用户情绪识别方法、装置以及计算机可读存储介质

权利要求书

1.一种用户情绪识别方法，其特征在于，包括以下步骤：

获取用户的人脸图像和语音信息；

根据所述人脸图像预设关键点的位置信息确定所述用户的第一情绪状态；

根据所述语音信息确定所述用户的第二情绪状态；

根据所述第一情绪状态和所述第二情绪状态确定所述用户最终的情绪状态。

2.根据权利要求1所述的用户情绪识别方法，其特征在于，所述根据所述第一情绪状态和所述第二情绪状态确定所述用户最终的情绪状态的步骤包括：

判断所述第一情绪状态与所述第二情绪状态是否相同；

当所述第一情绪状态与所述第二情绪状态相同时，则将所述第一情绪状态或所述第二情绪状态作为所述用户最终的情绪状态。

3.根据权利要求2所述的用户情绪识别方法，其特征在于，所述根据所述第一情绪状态和所述第二情绪状态确定所述用户最终的情绪状态的步骤包括：

当所述第一情绪状态与所述第二情绪状态不相同时，判断所述第一情绪状态和所述第二情绪状态是否包含有消极情绪状态；

若是，则将包含有消极情绪状态的情绪状态作为所述用户最终的情绪状态；

若否，则根据所述第一情绪状态的第一权值以及所述第二情绪状态的第二权值计算得到所述用户最终的情绪状态。

4.根据权利要求1所述的用户情绪识别方法，其特征在于，根据所述人脸图像预设关键点的位置信息确定所述所述用户的第一情绪状态的步骤包括：

根据所述人脸图像建立人脸三维坐标模型；

根据所述人脸三维坐标模型确定所述预设关键点对应的坐标值，并根据所述坐标值计算每两个所述关键点之间的距离信息；

将所述距离信息与对应预设的距离信息进行比较，根据比较结果确定所述用户的第一情绪状态。

5.根据权利要求1所述的用户情绪识别方法，其特征在于，根据所述人脸图像预设关键点的位置信息确定所述用户的第一情绪状态的步骤包括：

根据预先划分的人脸图像区域获取每个区域对应的预设关键点的位置信息；

根据获取的位置信息计算每个区域对应的局部情绪状态；

根据各个局部情绪状态确定所述用户的第一情绪状态。

6.根据权利要求1所述的用户情绪识别方法，其特征在于，所述根据所述语音信息确定所述用户的第二情绪状态的步骤包括：

对所述语音信息进行分析得到文本特征和语调特征；

将所述文本特征与文本数据库预存的信息进行匹配，得到第一匹配结果；

将所述语调特征与语调数据库预存的信息进行匹配，得到第二匹配结果；

结合所述第一匹配结果和所述第二匹配结果，得到所述用户的第二情绪状态。

7.如权利要求6所述用户情绪识别方法，其特征在于，所述将所述语调特征与语调数据库预存的信息进行匹配，得到第二匹配结果的步骤包括：

判断所述第一匹配结果与所述文本数据库预存的信息是否匹配；

若是，则根据所述第一匹配结果调出第一语调数据库，将所述第一语调数据库作为语调数据库；

若否，则调出第二语调数据库，将所述第二语调数据库作为语调数据库；

根据所述语调特征和所述语调数据库，得到所述第二匹配结果。

8.如权利要求7所述用户情绪识别方法，其特征在于，所述根据所述语调特征和所述语调数据库，得到所述第二匹配结果的步骤包括：

根据所述语调数据库调出语音情绪状态判断模型；

将所述第二匹配结果与所述语音情绪状态判断模型进行比对，得到所述用户的第二情绪状态。

9.一种用户情绪识别装置，其特征在于，包括存储器、处理器及存储在存储器上并可在处理器上运行的用户情绪识别程序，所述处理器执行所述用户情绪识别程序时实现权利要求1-8任一所述的用户情绪识别方法的步骤。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有用户情绪识别程序，所述用户情绪识别程序被处理器执行如权利要求1至8中任一项所述的用户情绪识别方法的步骤。