[发明专利]意图识别模型的训练方法、装置、计算机设备和存储介质有效
申请号: | 202011594565.9 | 申请日: | 2020-12-29 |
公开(公告)号: | CN112612894B | 公开(公告)日: | 2022-03-18 |
发明(设计)人: | 左彬靖 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
主分类号: | G06F16/35 | 分类号: | G06F16/35;G06F16/332;G06F16/33;G06N3/04;G06N3/08 |
代理公司: | 深圳市明日今典知识产权代理事务所(普通合伙) 44343 | 代理人: | 王杰辉;陈秋波 |
地址: | 518000 广东省深圳市福田区福*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 意图 识别 模型 训练 方法 装置 计算机 设备 存储 介质 | ||
1.一种意图识别模型的训练方法,其特征在于,包括:
基于历史通话录音数据获取敏感文本以及正常文本,其中,所述敏感文本为包含敏感内容的文本,所述正常文本为不包含敏感内容的文本,且所述敏感文本与所述正常文本携带有对应的意图标签;
基于随机马赛克处理的方式,按照预设规则对所述敏感文本进行文本扩充处理,得到扩充后的敏感文本,以使所述扩充后的敏感文本的第一数量与所述正常文本的第二数量之间的比值等于预设比值,其中,所述随机马赛克处理是指以预设概率对文本中的每个字使用特殊符号进行替换处理;
对所述扩充后的敏感文本中除所述敏感文本外的其他文本进行标注处理,得到对应的指定敏感文本,以使所述其他文本携带对应的意图标签;
将所述指定敏感文本与所述正常文本作为训练样本,并获取与所述训练样本对应的上下文文本数据;
将所述训练样本以及与所述训练样本对应的上下文文本数据作为预设的初始意图识别模型的输入,以与所述训练样本对应的意图标签作为所述初始意图识别模型的输出,对所述初始意图识别模型进行训练,得到训练完成的第一意图识别模型;
获取预设的测试样本数据,将所述测试样本数据输入至所述第一意图识别模型,接收所述第一意图识别模型输出的与所述测试样本数据对应的识别结果;
基于所述识别结果对所述第一意图识别模型进行验证,判断是否验证通过;
若验证通过,将所述第一意图识别模型作为目标意图识别模型,以通过所述目标意图识别模型对新输入的客户对话文本数据进行意图识别。
2.根据权利要求1所述的意图识别模型的训练方法,其特征在于,所述基于随机马赛克处理的方式,按照预设规则对所述敏感文本进行文本扩充处理,得到扩充后的敏感文本,以使所述扩充后的敏感文本的第一数量与所述正常文本的第二数量之间的比值等于预设比值的步骤,包括:
获取所述敏感文本的第三数量;
计算所述第三数量与所述第一数量的差值,得到第四数量;
采用随机马赛克处理的方式对所述敏感文本进行处理,基于所述敏感文本生成与所述第四数量相同的多个第一敏感文本;
使用所述第一敏感文本对所述敏感文本进行扩充处理,得到所述扩充后的敏感文本。
3.根据权利要求2所述的意图识别模型的训练方法,其特征在于,所述基于随机马赛克处理的方式,按照预设规则对所述敏感文本进行文本扩充处理,得到扩充后的敏感文本,以使所述扩充后的敏感文本的第一数量与所述正常文本的第二数量之间的比值等于预设比值的步骤,包括:
获取预设文本,其中,所述预设文本为无意义的文本;
使用所述预设文本对所述敏感文本进行拼接处理,得到拼接后的第二敏感文本;
采用随机马赛克处理的方式对所述第二敏感文本进行处理,基于所述第二敏感文本生成与所述第四数量相同的多个第三敏感文本;
使用所述第三敏感文本对所述敏感文本进行扩充处理,得到所述扩充后的敏感文本。
4.根据权利要求2所述的意图识别模型的训练方法,其特征在于,所述基于随机马赛克处理的方式,按照预设规则对所述敏感文本进行文本扩充处理,得到扩充后的敏感文本,以使所述扩充后的敏感文本的第一数量与所述正常文本的第二数量之间的比值等于预设比值的步骤,包括:
获取预设敏感文本,其中,所述预设敏感文本为所有所述敏感文本中的任意一个文本;
从所有所述敏感文本中筛选出与所述预设敏感文本具有相同的意图标签的同类敏感文本;
使用所述同类敏感文本对所述预设敏感文本进行拼接处理,得到拼接后的第四敏感文本;
采用随机马赛克处理的方式对所述第四敏感文本进行处理,基于所述第四敏感文本生成与所述第四数量相同的多个第五敏感文本;
使用所述第五敏感文本对所述敏感文本进行扩充处理,得到所述扩充后的敏感文本。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011594565.9/1.html,转载请声明来源钻瓜专利网。