[发明专利]一种交互方法、装置及电子设备

说明书

本发明提供一种交互方法、装置及电子设备，涉及人工智能技术领域，其中，交互方法包括：接收输入的第一信息，所述第一信息包括图片、视频或者语音中的至少一项；确定所述第一信息包含的信息内容，对所述第一信息包含的信息内容进行解析，得到融合特征；采用自然语言处理算法对所述融合特征进行识别处理，得到所述第一信息对应的答案，输出所述答案。本发明实施例能够提高交互体验。

技术领域

本发明涉及人工智能技术领域，尤其涉及一种交互方法、装置及电子设备。

背景技术

随着人工智能技术的不断发展，人们对于更方便、快捷且高效的智能交互方式的需求越来越强烈，对于交互体验的要求越来越高。例如，人们可以向客服机器人输入文本，客服机器人会解析输入的文本，并进行回复，以实现人与客服机器人之间的交互。

然而，在现有的智能交互方式中，基本上只能以文本进行交互，交互方式较为单一，交互体验较差。

发明内容

本发明实施例提供一种交互方法、装置及电子设备，以解决在现有的智能交互方式中，基本上只能以文本进行交互，交互方式较为单一，交互体验较差的问题。

为解决上述技术问题，本发明是这样实现的：

第一方面，本发明实施例提供了一种交互方法，所述方法包括：

接收输入的第一信息，所述第一信息包括图片、视频或者语音中的至少一项；

确定所述第一信息包含的信息内容，对所述第一信息包含的信息内容进行解析，得到融合特征；

采用自然语言处理算法对所述融合特征进行识别处理，得到所述第一信息对应的答案，输出所述答案。

可选的，所述对所述第一信息包含的信息内容进行解析，得到融合特征，包括：

在所述第一信息包含的信息内容包括图片和文本的情况下，对所述图片进行解析，得到图片类别及图片描述信息，所述融合特征包括所述图片类别、所述图片描述信息及所述文本；

在所述第一信息包含的信息内容包括视频和文本的情况下，对所述视频进行解析，得到视频动作描述信息，所述融合特征包括所述视频动作描述信息及所述文本；

在所述第一信息包含的信息内容包括语音的情况下，对所述语音进行语音识别，得到识别文本，所述融合特征包括所述识别文本。

可选的，所述对所述语音进行语音识别之后，所述方法还包括：

对所述语音提取声纹特征，并基于所述声纹特征判断所述语音对应的用户是否为预设用户；

其中，若所述语音对应的用户为所述预设用户，则所述融合特征包括所述识别文本和所述预设用户对应的用户信息。

可选的，所述采用自然语言处理算法对所述融合特征进行识别处理之前，所述方法还包括：

在历史问题日志库中查找是否存在所述预设用户关联的历史问题；

所述采用自然语言处理算法对所述融合特征进行识别处理，包括：

若所述历史问题日志库中存在所述预设用户关联的历史问题，则基于所述预设用户关联的历史问题，采用自然语言处理算法对所述融合特征进行识别处理。

可选的，所述采用自然语言处理算法对所述融合特征进行识别处理之前，所述方法还包括：

基于所述第一信息确定所述第一信息对应的目标领域；

采用自然语言处理算法对所述融合特征进行识别处理，得到所述第一信息对应的答案，包括：

采用与所述目标领域对应的自然语言处理算法对所述融合特征进行识别处理，得到所述第一信息对应的答案。