[发明专利]用于在会话中提供响应的方法和装置

权利要求书

1.一种用于在会话中向用户提供响应的方法，包括：

在会话中接收与第一对象相关联的至少一条消息，所述会话在所述用户与电子对话代理之间；

获得对所述第一对象的图像表示；

通过对所述图像表示执行情感分析来获得所述图像表示的总图像情感向量；

通过对所述图像表示中的至少一个感兴趣区域执行情感分析来获得所述至少一个感兴趣区域的至少一个情感向量；

至少通过对所述图像表示的所述总图像情感向量和所述至少一个感兴趣区域的所述至少一个情感向量进行组合来确定所述第一对象的情感信息；

至少基于所述至少一条消息和所述情感信息来生成响应；以及

将所述响应提供给所述用户。

2.根据权利要求1所述的方法，其中，所述第一对象是艺术品、文物、科技展览品和摄影作品中的至少一个。

3.根据权利要求1所述的方法，其中，所述至少一条消息指示关于获得所述第一对象的情感类别的意图，并且所述生成所述响应包括：

至少基于所述第一对象的所述情感信息来确定所述第一对象的所述情感类别。

4.根据权利要求1所述的方法，其中，所述至少一条消息指示关于获得所述第一对象的领域类别的意图，并且所述生成所述响应包括：

至少基于所述第一对象的所述情感信息、所述第一对象的事实信息以及知识图谱中与所述第一对象相关联的知识信息来确定所述第一对象的所述领域类别。

5.根据权利要求4所述的方法，其中，通过以下方式来获得与所述第一对象相关联的所述知识信息：

从所述知识图谱中识别在密集向量空间中与所述第一对象匹配的第二对象；以及

从所述知识图谱中检索所述第二对象的属性作为所述知识信息。

6.根据权利要求1所述的方法，其中，所述至少一条消息指示关于获得对与所述第一对象相对应的第二对象的图像表示的意图，并且所述生成所述响应包括：

至少基于所述情感信息来确定所述第一对象与知识图谱中的候选对象之间的相似度；

至少基于所述相似度来选择所述第二对象；以及

在所述响应中包括对所述第二对象的所述图像表示。

7.根据权利要求6所述的方法，其中，所述确定所述相似度包括：

至少基于所述情感信息来计算对所述第一对象的所述图像表示与对所述知识图谱中的所述候选对象的图像表示之间的相似度分数。

8.根据权利要求6所述的方法，其中，所述确定所述相似度包括：

将对所述第一对象的所述图像表示转换为文本表示；以及

计算对所述第一对象的所述文本表示和对所述知识图谱中的所述候选对象的文本描述之间的相似度分数。

9.根据权利要求8所述的方法，其中，所述转换是至少基于所述情感信息的。

10.根据权利要求1所述的方法，其中，所述至少一条消息指示关于用指定图像中的第二脸部区域来改变所述图像表示中的第一脸部区域的意图，并且所述生成所述响应包括：

通过基于生成式对抗网络（GAN）由所述第二脸部区域替换所述第一脸部区域来生成经更新的图像表示。

11.根据权利要求10所述的方法，其中，所述至少一条消息进一步指示指定情感，并且所述生成所述经更新的图像表示是进一步基于所述指定情感的。

12.根据权利要求1所述的方法，其中，所述至少一条消息包括文本消息、图像消息、语音消息和视频消息中的至少一个。