[发明专利]对话系统获取方法、装置、存储介质及计算机程序产品

权利要求书

1.一种对话系统获取方法，包括：

利用神经网络模型建模至少两个智能体；

利用所述至少两个智能体组成虚拟交互系统；

针对每个智能体，分别进行以下处理：

当所述智能体向自身之外的其它智能体执行交互动作后，按照所述交互动作对应的奖励值计算方式，确定出所述交互动作对应的奖励值，其中，不同的交互动作对应不同的奖励值计算方式；当所述交互动作为推荐时，所述确定出所述交互动作对应的奖励值包括：获取被推荐的智能体对所推荐的内容资源的评分，计算所述评分与推荐成本的差值，将所述差值作为所述交互动作对应的奖励值，所述推荐成本为预定值；当所述交互动作为对话交流时，所述确定出所述交互动作对应的奖励值包括：分别获取所发送的对话消息对应的合理性评分、字数惩罚评分以及语言模型评分，计算所述合理性评分与所述字数惩罚评分的差值，得到第一计算结果，计算所述第一计算结果与所述语言模型评分的差值，得到第二计算结果，将所述第二计算结果作为所述交互动作对应的奖励值；

根据确定出的奖励值，并以获得更高奖励值为目标，持续训练所述智能体；

当训练完成后，将所述智能体作为用于进行人机对话的对话系统。

2.根据权利要求1所述的方法，还包括：分别为各智能体维护一个内容资源池；所推荐的内容资源为所述智能体对应的内容资源池中的内容资源。

3.根据权利要求1所述的方法，其中，所述分别获取所发送的对话消息对应的合理性评分、字数惩罚评分以及语言模型评分包括：

利用合理性评分模型确定出所述对话消息对应的合理性评分；

利用语言模型确定出所述对话消息对应的语言模型评分；

统计所述对话消息中包含的字数，根据所述字数确定出所述对话消息对应的字数惩罚评分。

4.根据权利要求1所述的方法，其中，所述获取被推荐的智能体对所推荐的内容资源的评分包括：

利用预先设定的评分机制，根据被推荐的智能体的兴趣分布信息及所推荐的内容资源的内容信息，确定出被推荐的智能体对所推荐的内容资源的评分。

5.一种对话系统获取装置，包括：第一构建模块、第二构建模块以及训练模块；

所述第一构建模块，用于利用神经网络模型建模至少两个智能体；

所述第二构建模块，用于利用所述至少两个智能体组成虚拟交互系统；

所述训练模块，用于针对每个智能体，分别进行以下处理：当所述智能体向自身之外的其它智能体执行交互动作后，按照所述交互动作对应的奖励值计算方式，确定出所述交互动作对应的奖励值，其中，不同的交互动作对应不同的奖励值计算方式；当所述交互动作为推荐时，所述确定出所述交互动作对应的奖励值包括：获取被推荐的智能体对所推荐的内容资源的评分，计算所述评分与推荐成本的差值，将所述差值作为所述交互动作对应的奖励值，所述推荐成本为预定值；当所述交互动作为对话交流时，所述确定出所述交互动作对应的奖励值包括：分别获取所发送的对话消息对应的合理性评分、字数惩罚评分以及语言模型评分，计算所述合理性评分与所述字数惩罚评分的差值，得到第一计算结果，计算所述第一计算结果与所述语言模型评分的差值，得到第二计算结果，将所述第二计算结果作为所述交互动作对应的奖励值；根据确定出的奖励值，并以获得更高奖励值为目标，持续训练所述智能体；当训练完成后，将所述智能体作为用于进行人机对话的对话系统。

6.根据权利要求5所述的装置，其中，

所述第二构建模块进一步用于，分别为各智能体维护一个内容资源池；所推荐的内容资源为所述智能体对应的内容资源池中的内容资源。

7.根据权利要求5所述的装置，其中，

所述训练模块利用合理性评分模型确定出所述对话消息对应的合理性评分，利用语言模型确定出所述对话消息对应的语言模型评分，统计所述对话消息中包含的字数，根据所述字数确定出所述对话消息对应的字数惩罚评分。