[发明专利]语音情感识别和标注的方法及装置

说明书

本发明实施例提供一种语音情感识别和标注方法及装置，该方法包括：对语音音频的识别文本进行文本情感识别，获得语音音频的文本情感信息；对语音音频的声学特征进行语音情感识别，获得语音音频的语音情感信息；结合语音情感信息及文本情感信息后，匹配获得对应的表情符号，并采用表情符号对识别文本进行标注。本发明实施例通过语音和文本双通道的情感识别，在语音识别的过程中给识别文本标注了合适的表情符号来表征识别文本中语句的情感信息，从而减少了语音识别过程中情感信息的缺失。

技术领域

本发明实施例涉及自然语音处理领域，更具体地，涉及一种语音情感识别和标注的方法及装置。

背景技术

语音识别是将人们说话得到的语音音频转换成文本。参见图2，在传统的语音识别STT流程中，直接利用神经网络模型对语音音频进行识别，识别得到文本。但是，语音交互是自然交互方式的重要形式，语音音频中不仅包含了文本内容所表达的信息，也包含了一部分纯文本所无法表达的情感信息。因此，现有技术中的语音识别方法会造成所表达的情感信息的缺失。

发明内容

为了解决上述问题，本发明实施例提供一种克服上述问题或者至少部分地解决上述问题的语音情感识别和标注的方法及装置。

根据本发明实施例的第一方面，提供一种语音情感识别和标注的方法，该方法包括：对语音音频的识别文本进行文本情感识别，获得语音音频的文本情感信息；对语音音频的声学特征进行语音情感识别，获得语音音频的语音情感信息；结合语音情感信息及文本情感信息后，匹配获得对应的表情符号，并采用表情符号对识别文本进行标注。

根据本发明实施例第二方面，提供了一种语音情感识别和标注的装置，该装置包括：识别模块，用于对语音音频的识别文本进行文本情感识别，获得语音音频的文本情感信息；对语音音频的声学特征进行语音情感识别，获得语音音频的语音情感信息；标注模块，用于结合语音情感信息及文本情感信息后，匹配获得对应的表情符号，并采用表情符号对识别文本进行标注。

根据本发明实施例的第三方面，提供了一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，处理器执行程序时实现如第一方面的各种可能的实现方式中任一种可能的实现方式所提供的语音情感识别和标注的方法。

根据本发明实施例的第四方面，提供了一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如第一方面的各种可能的实现方式中任一种可能的实现方式所提供的语音情感识别和标注的方法。

本发明实施例提供的语音情感识别和标注的方法及装置，通过对语音音频的识别文本进行文本情感识别，获得语音音频的文本情感信息，以及对语音音频的声学特征进行语音情感识别，获得语音音频的语音情感信息；并结合语音情感信息及文本情感信息后，匹配获得对应的表情符号，采用表情符号对识别文本进行标注。由于通过语音和文本双通道的情感识别，在语音识别的过程中给识别文本标注了合适的表情符号来表征识别文本中语句的情感信息，从而减少了语音识别过程中情感信息的缺失。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍。显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些图获得其他的附图。

图1为本发明实施例提供的语音情感识别和标注的方法的流程示意图；

图2为现有技术提供的语音情感识别和标注的方法的流程示意图；

图3为本发明另一实施例提供的语音情感识别和标注的方法的流程示意图；

图4为本发明又一实施例提供的语音情感识别和标注的方法的流程示意图；

图5为本发明实施例提供的语音情感识别和标注的装置的结构示意图；