[发明专利]一种基于情绪识别的人机交互方法及系统

说明书

本发明公开了一种基于情绪识别的人机交互方法和系统，所述方法包括：实时采集用户的图像，基于虹膜识别技术和人脸图像处理技术对所述用户的图像进行图像处理，得到用户的人脸识别信息；将所述人脸识别信息输入到经过预先训练的深度神经网络进行人脸识别处理，得到用户的人脸识别结果；所述人脸识别结果包括情绪信息；根据所述情绪信息确定用户当前的情绪状态，调整对应的情绪交互模式以使机器人给予用户对应的响应。本发明通过结合虹膜识别技术和人脸图像处理技术，使得机器人能够高效识别用户的情绪并针对不同情绪给予不同的响应，达到满足用户特定时刻的情感需求的目的。

技术领域

本发明涉及人工智能领域，具体涉及一种基于情绪识别的人机交互方法及系统。

背景技术

情绪识别是指研究一个自动、高效、准确的系统来识别人脸表情的状态，进而通过人脸表情信息了解人的情绪状态，比如高兴、悲伤、惊讶、愤怒等。该研究在人机交互、人工智能等方面有着重要的应用价值，是当前计算机视觉、模式识别、情感计算等领域的重要研究课题。

但是，在对现有技术的研究与实践过程中，本发明的发明人发现，在需要进行人机交互的技术领域，尤其是机器人技术上，通常需要能够对人的情感进行分析，使得机器人能够针对人不同的情绪给予不同的回应，但现有的人机交互技术仅仅考虑到识别人类的人脸特征，以此判断人的不同身份，而未有进一步实现机器与人进行人机互动、情绪交流的功能，因此现有人机交互技术亟待一种能够有效识别人的情绪的技术手段。

发明内容

本发明实施例所要解决的技术问题在于，提供一种基于情绪识别的人机交互方法及系统，使得机器人能够高效识别用户的情绪并针对不同情绪给予不同的响应。

为解决上述问题，本发明的一个实施例提供一种基于情绪识别的人机交互方法，至少包括如下步骤：

实时采集用户的图像，基于虹膜识别技术和人脸图像处理技术对所述用户的图像进行图像处理，得到用户的人脸识别信息；

将所述人脸识别信息输入到经过预先训练的深度神经网络进行人脸识别处理，得到用户的人脸识别结果；所述人脸识别结果包括情绪信息；

根据所述情绪信息确定用户当前的情绪状态，调整对应的情绪交互模式以使机器人给予用户对应的响应。

进一步地，所述基于情绪识别的人机交互方法，还包括：

在给予用户对应的响应后，再次采集用户的图像并识别用户的情绪状态，分析用户的情绪状态是否变化，记录并储存反馈数据和分析结果。

进一步地，调整对应的情绪交互模式以使机器人给予用户对应的响应，具体为：

通过机器人的语音聊天和动作给予用户相关响应，并利用显示装置显示用户当前的情绪状态、情绪波动曲线以及机器人响应用户情绪的表情。

进一步地，所述人脸识别信息包括虹膜信息、人脸皮肤信息、五官信息以及脸部肌肉信息。

进一步地，所述将所述人脸识别信息输入到经过预先训练的深度神经网络进行人脸识别处理，得到用户的人脸识别结果，具体为：

通过分析所采集的虹膜信息，得到用户的身份个性特征信息；

通过分析所采集的人脸皮肤信息，得到用户的年龄信息；

通过分析所采集的五官信息和脸部肌肉信息，得到用户当前的情绪信息。

进一步地，所述情绪状态包括喜、怒、忧、思、悲、恐和惊。

本发明的另一个实施例还提供了一种基于情绪识别的人机交互系统，包括：

采集模块，用于实时采集用户的图像，基于虹膜识别技术和人脸图像处理技术对所述用户的图像进行图像处理，得到用户的人脸识别信息；