[发明专利]文本处理、问答文本处理及文本处理模型训练方法在审
申请号: | 202211674486.8 | 申请日: | 2022-12-26 |
公开(公告)号: | CN116050405A | 公开(公告)日: | 2023-05-02 |
发明(设计)人: | 戴翼;郎皓;李永彬 | 申请(专利权)人: | 阿里巴巴(中国)有限公司 |
主分类号: | G06F40/289 | 分类号: | G06F40/289;G06F18/213;G06F18/214 |
代理公司: | 北京智信禾专利代理有限公司 11637 | 代理人: | 吴肖肖 |
地址: | 311121 浙江省杭州市余杭*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 文本 处理 问答 模型 训练 方法 | ||
本说明书实施例提供文本处理、问答文本处理及文本处理模型训练方法,其中所述文本处理方法包括:对待处理文本进行特征提取,获得待处理文本的文本特征;利用文本特征,匹配待处理文本对应的多个目标提示信息,其中,多个目标提示信息的粒度不同;将文本特征和多个目标提示信息输入文本处理模型,经文本处理模型的处理,获得文本处理结果,其中,文本处理模型基于多个训练样本文本和各训练样本文本对应的训练样本提示信息训练得到。通过匹配得到待处理文本对应的多个目标提示信息,可以更好地引导文本处理模型对待处理文本处理,并且,由于多个目标提示信息的粒度不同,使得文本处理模型获取的知识粒度也不同,进一步提高了文本处理结果的准确性。
技术领域
本说明书实施例涉及计算机技术领域,特别涉及一种文本处理方法。本说明书一个或者多个实施例同时涉及一种问答文本处理方法、一种文本处理模型训练方法、一种文本处理装置、一种问答文本处理装置、一种文本处理模型训练装置,一种计算设备,一种计算机可读存储介质以及一种计算机程序。
背景技术
随着计算机技术的发展,越来越多的工作和学习任务可以实现自动化处理,计算机技术已经逐步应用于各种日常的教育、学习活动中,例如利用计算机技术对文本进行处理,从而大大节省人力资源。
目前,在文本处理系统部署的生命周期中,需要不断学习新的任务,适应部署环境的发展,从而产生了文本处理系统终身学习的需求。对于这一需求,文本处理系统常常会出现如遗忘旧任务(灾难性遗忘)、测试任务不可知、无法实现细粒度知识共享等问题,导致文本处理准确度差。因此,亟需一种准确性高的文本处理方案。
发明内容
有鉴于此,本说明书实施例提供了一种文本处理方法。本说明书一个或者多个实施例同时涉及一种问答文本处理方法、一种文本处理模型训练方法、一种文本处理装置、一种问答文本处理装置、一种文本处理模型训练装置,一种计算设备,一种计算机可读存储介质以及一种计算机程序,以解决现有技术中存在的技术缺陷。
根据本说明书实施例的第一方面,提供了一种文本处理方法,包括:
对待处理文本进行特征提取,获得待处理文本的文本特征;
利用文本特征,匹配待处理文本对应的多个目标提示信息,其中,多个目标提示信息的粒度不同;
将文本特征和多个目标提示信息输入文本处理模型,经文本处理模型的处理,获得文本处理结果,其中,文本处理模型基于多个训练样本文本和各训练样本文本对应的训练样本提示信息训练得到。
根据本说明书实施例的第二方面,提供了一种问答文本处理方法,包括:
对待处理问答文本进行特征提取,获得待处理问答文本的问答文本特征;
利用问答文本特征,匹配待处理问答文本对应的多个目标问答提示信息,其中,多个目标问答提示信息的粒度不同;
将问答文本特征和多个目标问答提示信息输入文本处理模型,经文本处理模型的处理,获得问答文本处理结果,其中,文本处理模型基于多个训练样本文本和各训练样本文本对应的训练样本提示信息训练得到。
根据本说明书实施例的第三方面,提供了一种文本处理模型训练方法,应用于云侧设备,该方法包括:
获取第二样本集,其中,第二样本集包括多个训练样本文本,训练样本文本携带训练样本提示信息和样本处理结果;
对多个训练样本文本进行特征提取,获得多个训练样本文本的训练文本特征;
利用训练文本特征,匹配各训练样本文本对应的多个训练样本提示信息,其中,训练样本提示信息包括训练样本全局提示信息、训练样本形式提示信息、训练样本任务提示信息和训练样本元提示信息;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴(中国)有限公司,未经阿里巴巴(中国)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211674486.8/2.html,转载请声明来源钻瓜专利网。