[发明专利]用户情绪识别方法、装置以及计算机可读存储介质

说明书

本发明公开了一种用户情绪识别方法，该情绪识别方法包括以下步骤：获取用户的人脸图像和语音信息；根据所述人脸图像关键点的位置信息确定所述用户的第一情绪状态；根据所述语音信息确定所述用户的第二情绪状态；根据所述第一情绪状态和所述第二情绪状态确定所述用户最终的情绪状态。本发明还公开了一种用户情绪识别装置和计算机可读存储介质。本发明提高通过结合人脸图像关键点的位置信息和语音信息识别用户的情绪化状态，从而提高情绪识别的准确率。

技术领域

本发明涉及机器人及物联网技术领域，尤其涉及一种用户情绪识别方法、装置以及计算机可读存储介质。

背景技术

在很多场景中情绪识别是很有必要的，目前的机器人能够对不同年龄层的人进行简单的陪伴，例如老年陪护的机器人家庭医生以及青少年配合机器人，需要目机器人能够读懂陪伴对象的情绪变化，目前的情绪识别主要采用人脸图像来进行情绪识别，人类的情绪识别是非常复杂的，采用单一的人脸图像识别可能会产生误判，从而导致识别的准确率较低。

上述内容仅用于辅助理解本发明的技术方案，并不代表承认上述内容是现有技术。

发明内容

本发明的主要目的在于提供一种用户情绪识别方法、装置以及计算机可读存储介质，旨在解决提高情绪识别的准确率的技术问题。

为实现上述目的，本发明提供一种用户情绪识别方法，所述用户情绪识别方法包括以下步骤：

获取用户的人脸图像和语音信息；

根据所述人脸图像预设关键点的位置信息确定所述用户的第一情绪状态；

根据所述语音信息确定所述用户的第二情绪状态；

根据所述第一情绪状态和所述第二情绪状态确定所述用户最终的情绪状态。

可选地，所述根据所述第一情绪状态和所述第二情绪状态确定所述用户最终的情绪状态的步骤包括：

判断所述第一情绪状态与所述第二情绪状态是否相同；

当所述第一情绪状态与所述第二情绪状态相同时，则将所述第一情绪状态或所述第二情绪状态作为所述用户最终的情绪状态。

可选地，所述根据所述第一情绪状态和所述第二情绪状态确定所述用户最终的情绪状态的步骤包括：

当所述第一情绪状态与所述第二情绪状态不相同时，判断所述第一情绪状态和所述第二情绪状态是否包含有消极情绪状态；

若是，则将包含有消极情绪状态的情绪状态作为所述用户最终的情绪状态；

若否，则根据所述第一情绪状态的第一权值以及所述第二情绪状态的第二权值计算得到所述用户最终的情绪状态。

可选地，根据所述人脸图像预设关键点的位置信息确定所述用户的第一情绪状态的步骤包括：

根据所述人脸图像建立人脸三维坐标模型；

根据所述人脸三维坐标模型确定所述多个预设关键点对应的坐标值，并根据所述坐标值计算每两个所述关键点之间的距离信息；

将所述距离信息与对应预设的距离信息进行比较，根据比较结果确定所述用户的第一情绪状态。

可选地，根据所述人脸图像预设关键点的位置信息确定所述用户的第一情绪状态的步骤包括：

根据预先划分的人脸图像区域获取每个区域对应的预设关键点的位置信息；

根据获取的位置信息计算每个区域对应的局部情绪状态；

根据各个局部情绪状态确定所述用户的第一情绪状态。

可选地，所述根据所述语音信息确定所述用户的第二情绪状态的步骤包括：