[发明专利]槽位更新语料的挖掘方法、装置、电子设备和存储介质在审
申请号: | 202011559712.9 | 申请日: | 2020-12-25 |
公开(公告)号: | CN112541070A | 公开(公告)日: | 2021-03-23 |
发明(设计)人: | 于振龙;李和瀚;孙辉丰;孙叔琦;常月;李婷婷 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G06F16/332 | 分类号: | G06F16/332;G06F16/33;G06F40/289 |
代理公司: | 北京清亦华知识产权代理事务所(普通合伙) 11201 | 代理人: | 王萌 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 更新 语料 挖掘 方法 装置 电子设备 存储 介质 | ||
1.一种槽位更新语料的挖掘方法,包括:
从历史交互日志中,获取各个查询语句及每个查询语句对应的自然语言识别结果,其中,所述自然语言识别结果包括所述查询语句中的词槽值所属的词槽名;
将每个所述查询语句中的词槽值用其所属的词槽名替换,以生成参考模板集;
将所述参考模板集中的每个参考模板进行拆分,以获取槽位更新模板集;
基于所述槽位更新模板集对预设的语料集进行遍历,以从所述语料集中获取与所述槽位更新模板集中的槽位更新模板匹配的槽位更新语料。
2.如权利要求1所述的方法,其中,所述自然语言识别结果中还包括每个所述查询语句对应的意图,所述将所述参考模板集中的每个参考模板进行拆分,以获取槽位更新模板集,包括:
将所述参考模板集中的每个所述参考模板进行拆分,以获取仅包含一个词槽名的多个槽位更新模板;
将仅对应用户意图的槽位更新模板去除,以获取所述槽位更新模板集。
3.如权利要求2所述的方法,其中,每个所述查询语句对应的意图包括用户意图及槽位更新意图中的至少一个,所述将仅对应用户意图的槽位更新模板去除,包括:
在任一所述槽位更新模板为所述参考模板集中的一个参考模板、且所述参考模板对应的意图仅为用户意图的情况下,将任一所述槽位更新模板去除。
4.如权利要求1所述的方法,其中,所述基于所述槽位更新模板集对预设的语料集进行遍历,以从所述语料集中获取与所述槽位更新模板集中的槽位更新模板匹配的槽位更新语料,包括:
对所述语料集中每个语料进行解析,以确定所述每个语料中包含的实体及所述实体对应的候选词槽名;
将每个所述语料中的实体分别用对应的所述候选词槽名替换,以生成候选模板;
在所述槽位更新模板集中包含与任一所述候选模板匹配的槽位更新模板的情况下,确定所述任一候选模板对应的语料为槽位更新语料。
5.如权利要求4所述的方法,其中,所述确定所述任一候选模板对应的语料为槽位更新语料之后,还包括:
根据与所述任一候选模板匹配的槽位更新模板,对所述槽位更新语料进行标注,以获取槽位更新训练数据;
利用所述槽位更新训练数据,对初始意图识别模型进行训练,以生成槽位更新意图识别模型。
6.如权利要求1-5任一所述的方法,其中,所述基于所述槽位更新模板集对预设的语料集进行遍历,以从所述语料集中获取与所述槽位更新模板集中的槽位更新模板匹配的槽位更新语料,包括:
确定所述槽位更新模板集中各个槽位更新模板间关联的非词槽名;
根据所述各个槽位更新模板间关联的非词槽名,构建与所述槽位更新模板集对应的模板树;
基于所述模板树,对所述预设的语料集进行遍历,以根据所述语料集中各个语料与模板树中的节点的匹配关系,确定所述语料集中包括的槽位更新语料。
7.如权利要求6所述的方法,其中,所述根据所述语料集中各个语料与模板树中的节点的匹配关系,确定所述语料集中包括的槽位更新语料,包括:
在任一语料中的非词槽名与所述模板树中的第一节点匹配、且位于所述非词槽名后的实体对应的候选词槽名中包含所述第一节点的一个词槽名子节点的情况下,确定所述任一语料为槽位更新语料;或者,
在任一语料中的实体对应的一个候选词槽名与所述模板树中的第二节点匹配、且位于所述实体之后的非词槽名与所述第二节点的一个子节点匹配的情况下,确定所述任一语料为槽位更新语料。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011559712.9/1.html,转载请声明来源钻瓜专利网。
- 上一篇:数据处理方法及平台、系统、电子设备、可读介质
- 下一篇:一种食用菌接种装置