[发明专利]情绪波动检测方法、装置、电子设备及存储介质

说明书

本发明涉及人工智能技术，揭露一种情绪波动检测方法，包括：在人机交互过程中，每次提取用户的第i条用户语音及第i+1条用户语音的语音情绪特征及文本情绪特征，利用所述语音情绪特征及所述文本情绪特征，计算用户的情绪变化幅度，当用户的任一情绪变化幅度，即语音情绪变化幅度或文本情绪变化幅度大于或等于预设的预警阈值时，则触发预设的情绪波动干预机制。此外，本发明还涉及区块链技术，语音或文本情绪特征可存储于区块链的节点。本发明还提出一种情绪波动检测装置、设备以及介质。本发明可以实时检测人机交互过程中发生的用户的情绪波动，以提高用户体验。

技术领域

本发明涉及人工智能技术领域，尤其涉及一种情绪波动检测方法、装置、电子设备及计算机可读存储介质。

背景技术

近年来，随着人工智能技术的不断发展，人机交互在机场、银行、商场等场所得到广泛的应用。人机交互应用不仅要求对话机器人要理解用户的意图，还需要理解用户的情绪，需要对不同用户、不同环境、不同任务给予不同的反馈和支持。

高精度的人机交互日益受到研究者的重视，现阶段的人机交互研究多为基于不同模态信号的情绪识别，例如，基于表情、语音、文本、肢体动作的情绪识别，以便进一步完善对话机器人的话术，从而提升人机交互质量。这种情绪识别关注的是用户最终的情绪状态，忽略了在人机交互过程中，可能会发生的用户的情绪波动，对话机器人不能及时调整话术安抚用户，可能会降低用户的体验感。

发明内容

本发明提供一种情绪波动检测方法、装置及计算机可读存储介质，其主要目的在于实时检测人机交互过程中发生的用户的情绪波动，以提高用户体验。

为实现上述目的，本发明提供的一种情绪波动检测方法，包括：

从人机交互中获取第i条用户语音，其中i＝1、2、3…n，并获取第i+1条用户语音，提取所述第i条用户语音的语音情绪特征及所述第i+1条用户语音的语音情绪特征；

分别将所述第i条用户语音及所述第i+1条用户语音转换为相应的第一文本及第二文本，提取所述第一文本的文本情绪特征及所述第二文本的文本情绪特征；

利用所述第i条用户语音的语音情绪特征及所述第i+1条用户语音的语音情绪特征，计算得到所述第i条用户语音与所述第i+1条用户语音之间的语音情绪变化幅度；

利用所述第一文本的文本情绪特征及所述第二文本的文本情绪特征，计算得到所述第一文本与所述第二文本之间的文本情绪变化幅度；

判断所述语音情绪变化幅度及所述文本情绪变化幅度是否都小于预设的预警阈值；

若所述语音情绪变化幅度及所述文本情绪变化幅度都小于所述预设的预警阈值，则利用i+1更新所述i，并返回上述的从人机交互中获取第i条用户语音的步骤；

若所述语音情绪变化幅度或所述文本情绪变化幅度不小于所述预设的预警阈值时，则触发预设的情绪波动干预机制。

可选地，所述提取所述第i条用户语音的语音情绪特征，包括：

对所述第i条用户语音进行分帧加窗，得到多个语音帧，并从所述多个语音帧中逐个选取其中一个语音帧为目标语音帧；

将所述目标语音帧映射为语音时域图，统计所述语音时域图的峰值、幅值、均值和过零率，根据所述幅值计算帧能量，并将所述峰值、所述幅值、所述均值、所述帧能量及所述过零率汇集为所述第i条用户语音的语音情绪特征。

可选地，所述提取所述第一文本的文本情绪特征，包括：

对所述第一文本执行分词操作，得到文本分词集；

从所述文本分词集中逐个选取其中一个文本分词为目标分词，并统计所述目标分词和所述目标分词的相邻文本分词在所述目标分词的预设邻域范围内共同出现的共现次数；