[发明专利]一种自然语言解析方法、装置、服务器及存储介质有效
申请号: | 201810713935.2 | 申请日: | 2018-06-29 |
公开(公告)号: | CN108959257B | 公开(公告)日: | 2022-11-22 |
发明(设计)人: | 徐威;纪友升;王文敏;梁一川;凌光;周超 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G06F40/289 | 分类号: | G06F40/289;G06F40/30;G06N5/04 |
代理公司: | 北京品源专利代理有限公司 11332 | 代理人: | 孟金喆 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 自然语言 解析 方法 装置 服务器 存储 介质 | ||
1.一种自然语言解析方法,其特征在于,所述方法包括:
将待解析的自然语言文本进行切词,得到对应的多个切词片段;
对每个切词片段进行概念标注,得到至少一个概念标签,其中,所述概念标签用于映射切词片段的抽象概念;
对所述至少一个概念标签进行排列组合,得到多个概念标签序列,其中,在不同的概念标签序列之间,各概念标签序列中的概念标签所覆盖的切词边界不重合;
针对每个概念标签序列,结合预先建立的实体意图知识网络进行意图推导,得到所述自然语言文本的意图和槽位,其中,所述实体意图知识网络中包括多个不同业务场景的实体意图集合,且不同业务场景的实体意图集合之间通过实体相互关联;
所述针对每个概念标签序列,结合预先建立的实体意图知识网络进行意图推导,得到所述自然语言文本的意图和槽位,包括:
针对每个概念标签序列中的多个概念标签,按照与所述自然语言文本相同的表达顺序,依次将单个概念标签以及相邻多个概念标签,分别与所述实体意图知识网络进行匹配;
如果匹配到意图,则获取该意图在所述实体意图知识网络中对应的实体,将该实体对应的概念标签与尚未进行匹配的概念标签合并为新的概念标签序列,并对该新的概念标签序列执行上述匹配操作,直到当前概念标签序列中的全部概念标签匹配完毕、或者匹配不到意图为止;
将在上述匹配过程中匹配得到的全部意图,按照匹配到意图时对应的概念标签在当前概念标签序列中的覆盖率,确定出最终的意图,并将其余的概念标签作为槽位。
2.根据权利要求1所述的方法,其特征在于,对每个切词片段进行概念标注,得到至少一个概念标签,包括:
将每个切词片段,以及所述多个切词片段中相邻切词片段的组合,与预先建立的知识词表进行匹配;
如果所述知识词表中存在匹配的概念标签,则将该匹配的概念标签作为所述至少一个概念标签。
3.根据权利要求1所述的方法,其特征在于,在针对每个概念标签序列,结合预先建立的实体意图知识网络进行意图推导,得到所述自然语言文本的意图和槽位之前,所述方法还包括:
对每一个概念标签序列,依据概念标签覆盖率、概念标签个数和概念标签分值进行排序,从排序后的多个概念标签序列中,选取排在前面的N个概念标签序列,其中,概念标签覆盖率、概念标签个数和概念标签分值的优先级依次降低,N为正整数;
相应的,针对每个概念标签序列,结合预先建立的实体意图知识网络进行意图推导,得到所述自然语言文本的意图和槽位,包括:
对所述N个概念标签序列中的每一个概念标签序列,结合预先建立的实体意图知识网络进行意图推导,得到所述自然语言文本的意图和槽位。
4.根据权利要求1-3中任一所述的方法,其特征在于,在对待解析的自然语言文本进行切词之前,所述方法还包括:
对所述自然语言文本进行预处理,其中,所述预处理至少包括去掉标点符号、大小写转换。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810713935.2/1.html,转载请声明来源钻瓜专利网。