[发明专利]外呼系统的对话管理方法、系统、电子设备和存储介质在审
申请号: | 201911346577.7 | 申请日: | 2019-12-24 |
公开(公告)号: | CN111104502A | 公开(公告)日: | 2020-05-05 |
发明(设计)人: | 江小林;罗超;胡泓 | 申请(专利权)人: | 携程计算机技术(上海)有限公司 |
主分类号: | G06F16/332 | 分类号: | G06F16/332;G06F16/903;G06F16/33;G06N3/08;H04M3/493 |
代理公司: | 上海弼兴律师事务所 31283 | 代理人: | 薛琦;张冉 |
地址: | 200335 上海市*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 系统 对话 管理 方法 电子设备 存储 介质 | ||
1.一种外呼系统的对话管理方法,其特征在于,所述对话管理方法包括:
获取语义信息;
根据所述语义信息更新当前的对话状态;
将所述对话状态输入到预存的状态机中进行状态跳转;
所述外呼系统根据所述状态机跳转后的状态进行输出问答。
2.如权利要求1所述的外呼系统的对话管理方法,其特征在于,所述对话管理方法还包括以下步骤:
在所述状态机跳转到预设状态后,将所述语义信息输入到预训练的强化学习模型;
所述外呼系统根据所述强化学习模型的输出结果进行输出问答。
3.如权利要求1或2所述的外呼系统的对话管理方法,其特征在于,在所述获取语义信息的步骤之前,所述对话管理方法还包括以下步骤:
获取领域信息中的槽信息,所述槽信息用于组成所述对话状态。
4.如权利要求1所述的外呼系统的对话管理方法,其特征在于,所述状态机根据当前所述对话状态和触发事件进行状态跳转;
所述对话状态包括若干子对话状态;
所述子对话状态为结构化数据,包括属性和成员变量;
所述属性包括状态属性,所述成员变量包括状态转移函数;
所述子对话状态根据所述触发事件更新所述对话状态;和/或,
所述触发事件为所述语义信息中的用户意图。
5.如权利要求2所述的外呼系统的对话管理方法,其特征在于,所述对话管理方法还包括训练强化学习模型的步骤,所述训练强化学习模型的步骤包括:
预设奖励机制进行自动数据标注;
采用热启动方式收集第一对话数据;
采用epislon-greedy探索方式收集第二对话数据;
将所述第一对话数据和所述第二对话数据中的对话状态和动作进行向量化表示后输入到强化学习模型并获取模型输出结果。
6.如权利要求5所述的外呼系统的对话管理方法,其特征在于,
所述语义信息包括所述对话状态和所述动作;
在所述状态机跳转到预设状态后,将所述对话状态和所述动作进行向量化表示后输入到预训练的强化学习模型;
所述外呼系统输出所述预训练的强化学习模型的输出问答;和/或,
所述强化学习模型为DQN算法模型。
7.一种外呼系统的对话管理系统,其特征在于,所述对话管理系统包括:
语义信息获取模块,用于获取语义信息;
对话状态更新模块,用于根据所述语义信息更新当前的对话状态;
状态跳转模块,用于将所述对话状态输入到预存的状态机中进行状态跳转;
第一问答输出模块,用于所述外呼系统根据所述状态机跳转后的状态进行输出问答。
8.如权利要求7所述的外呼系统的对话管理系统,其特征在于,所述对话管理系统还包括以下模块:
第一模型输入模块,用于在所述状态机跳转到预设状态后,将所述语义信息输入到预训练的强化学习模型;
第二问答输出模块,用于所述外呼系统根据所述强化学习模型的输出结果进行输出问答。
9.如权利要求7或8所述的外呼系统的对话管理系统,其特征在于,所述对话管理系统还包括以下模块:
槽信息获取模块,用于获取领域信息中的槽信息,所述槽信息用于组成所述对话状态。
10.如权利要求7所述的外呼系统的对话管理系统,其特征在于,所述状态机根据当前所述对话状态和触发事件进行状态跳转;
所述对话状态包括若干子对话状态;
所述子对话状态为结构化数据,包括属性和成员变量;
所述属性包括状态属性,所述成员变量包括状态转移函数;
所述子对话状态根据所述触发事件更新所述对话状态;和/或,
所述触发事件为所述语义信息中的用户意图。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于携程计算机技术(上海)有限公司,未经携程计算机技术(上海)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911346577.7/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种英语翻译测试系统
- 下一篇:正负压接口的静电放电钳位保护元件