[发明专利]情绪识别方法和装置以及智能交互方法和设备

摘要

本发明一实施例提供了一种情绪识别方法和装置以及智能交互方法和设备，解决了现有技术中的智能交互方式无法根据用户的情绪状态不同提供差别化的应答服务的问题。其中的情绪识别方法包括：根据用户的语音消息获取语音情绪识别结果，所述语音情绪识别结果包括预设的至少两种情绪分类的一种；根据用户的面部图像获取面部情绪识别结果，所述面部情绪识别结果也包括预设的所述至少两种情绪分类的一种；以及当所获取的语音情绪识别结果和所获取的面部情绪识别结果为相同的情绪分类时，判断用户的情绪状态为所述相同的情绪分类。

主权项

1.一种情绪识别方法，其特征在于，包括：根据用户的语音消息获取语音情绪识别结果，所述语音情绪识别结果包括预设的至少两种情绪分类的一种；根据用户的面部图像获取面部情绪识别结果，所述面部情绪识别结果也包括预设的所述至少两种情绪分类的一种；以及当所获取的语音情绪识别结果和所获取的面部情绪识别结果为相同的情绪分类时，判断用户的情绪状态为所述相同的情绪分类；其中，判断用户的情绪状态为所述相同的情绪分类包括：计算所获取的语音情绪识别结果的置信度，并计算所获取的面部情绪识别结果的置信度；以及当所述语音情绪识别结果的置信度大于第一置信度阈值，所述面部情绪识别结果的置信度大于第二置信度阈值，且所获取的语音情绪识别结果和所获取的面部情绪识别结果为相同的情绪分类时，判断用户的情绪状态为所述相同的情绪分类；或，当所述语音情绪识别结果的置信度与语音权重系数的乘积与所述面部情绪识别结果的置信度与面部权重系数的乘积之和大于第三置信度阈值，且所获取的语音情绪识别结果和所获取的面部情绪识别结果为相同的情绪分类时，判断用户的情绪状态为所述相同的情绪分类；根据用户的语音消息获取语音情绪识别结果包括：提取所述用户的语音消息中的声纹特征信息；将所述提取的声纹特征信息与多个预设的声音情感模型中的声纹特征信息相匹配，其中所述多个预设的声音情感模型分别对应不同的情绪分类；以及根据匹配的声音情感模型获取对应的情绪分类；其中，所述声音情感模型为预先建立，所述声音情感模型通过如下步骤预先建立：采集中性情感语料，基于所采集的中性情感语料中的声纹特征获得中性情感模型，所述中性情感模型包括与声纹特征对应的多个特征分量；采集不同情感状态下的语料，将所述不同情感状态下的语料中的声纹特征与所述中性情感模型中的各特征分量进行对比；以及基于所述不同情感状态下的语料中的声纹特征与所述中性情感模型中的各特征分量之间的区别，通过计算获得不同情感状态下的声音情感模型。