[发明专利]一种文本理解方法、系统、终端设备和存储介质在审
申请号: | 202110741207.4 | 申请日: | 2021-06-30 |
公开(公告)号: | CN113486661A | 公开(公告)日: | 2021-10-08 |
发明(设计)人: | 徐春光 | 申请(专利权)人: | 东莞市小精灵教育软件有限公司 |
主分类号: | G06F40/289 | 分类号: | G06F40/289;G06F40/30;G06F16/332;G06F16/33;G06K9/62;G06N3/02 |
代理公司: | 上海硕力知识产权代理事务所(普通合伙) 31251 | 代理人: | 林晓青 |
地址: | 523851 广东省东莞市*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 文本 理解 方法 系统 终端设备 存储 介质 | ||
1.一种文本理解方法,其特征在于,包括步骤:
获取用户的会话信息,将所述会话信息转换为待识别文本;
通过目标识别模型从所述待识别文本中,分别同时输出对应的意图类别和关键词;
根据所述意图类别和关键词,得到所述会话信息对应的用户意图。
2.根据权利要求1所述的文本理解方法,其特征在于,还包括步骤:
获取短文本语料,并对所述短文本语料进行分类标注和关键词标注;
将标注后的短文本语料划分为训练集、验证集和测试集;
根据所述训练集进行训练生成对应的候选识别模型;
根据所述测试集和验证集,对所述候选识别模型进行参数调整,生成所述目标识别模型。
3.根据权利要求2所述的文本理解方法,其特征在于,所述根据所述测试集和验证集,对所述候选识别模型进行参数调整,生成所述目标识别模型包括步骤:
根据所述验证集对所述候选识别模型进行参数调整,生成对应的待定识别模型;
根据知识蒸馏算法将所述待定识别模型进行裁剪得到候选识别模型;
根据待定识别模型对所述测试集的验证结果,以及所述测试集中的短文本语料,对所述候选识别模型进行参数调整,生成所述目标识别模型。
4.根据权利要求2所述的文本理解方法,其特征在于,所述对所述短文本语料进行分类标注包括步骤:
通过预训练层从所述短文本语料中提取得到对应的词向量;
通过池化层抽取所述词向量的特征信息后由连接层进行意图分类标注,同时通过标注层对所述词向量进行词性标注。
5.一种文本理解系统,其特征在于,包括:
转换模块,用于获取用户的会话信息,将所述会话信息转换为待识别文本;
识别模块,用于通过目标识别模型从所述待识别文本中,分别同时输出对应的意图类别和关键词;
处理模块,用于根据所述意图类别和关键词,得到所述会话信息对应的用户意图。
6.根据权利要求5所述的文本理解系统,其特征在于,还包括:
语料获取模块,用于获取短文本语料;
分类标注模块,用于对所述短文本语料进行分类标注和关键词标注;
划分模块,用于将标注后的短文本语料划分为训练集、验证集和测试集;
训练模块,用于根据所述训练集进行训练生成对应的候选识别模型;
生成模块,用于根据所述测试集和验证集,对所述候选识别模型进行参数调整,生成所述目标识别模型。
7.根据权利要求6所述的文本理解系统,其特征在于,所述生成模块包括:
调整生成单元,用于根据所述验证集对所述候选识别模型进行参数调整,生成对应的待定识别模型;
模型裁剪单元,用于根据知识蒸馏算法将所述待定识别模型进行裁剪得到候选识别模型;
模型建立单元,用于根据待定识别模型对所述测试集的验证结果,以及所述测试集中的短文本语料,对所述候选识别模型进行参数调整,生成所述目标识别模型。
8.根据权利要求6所述的文本理解系统,其特征在于,所述分类标注模块包括:
提取单元,用于通过预训练层从所述短文本语料中提取得到对应的词向量;
分类标注单元,用于通过池化层抽取所述词向量的特征信息后由连接层进行意图分类标注,同时通过标注层对所述词向量进行词性标注。
9.一种终端设备,其特征在于,包括处理器、存储器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器,用于执行所述存储器上所存放的计算机程序,实现如权利要求1至权利要求4任一项所述的文本理解方法所执行的操作。
10.一种存储介质,其特征在于,所述存储介质中存储有至少一条指令,所述指令由处理器加载并执行以实现如权利要求1至权利要求4任一项所述的文本理解方法所执行的操作。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于东莞市小精灵教育软件有限公司,未经东莞市小精灵教育软件有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110741207.4/1.html,转载请声明来源钻瓜专利网。