[发明专利]分类模型构建及文本语句分类方法、设备及存储介质在审
申请号: | 202110185296.9 | 申请日: | 2021-02-10 |
公开(公告)号: | CN112966102A | 公开(公告)日: | 2021-06-15 |
发明(设计)人: | 王宝岩;杨悦 | 申请(专利权)人: | 万翼科技有限公司 |
主分类号: | G06F16/35 | 分类号: | G06F16/35;G06F40/211;G06F40/216;G06F40/30 |
代理公司: | 深圳智汇远见知识产权代理有限公司 44481 | 代理人: | 艾青;牛悦涵 |
地址: | 519085 广东省珠海市*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 分类 模型 构建 文本 语句 方法 设备 存储 介质 | ||
1.一种分类模型构建方法,其特征在于,包括:
获取样本数据,其中,所述样本数据包括正样本语句、所述正样本语句对应的标签、负样本语句和所述负样本语句对应的标签;
将所述样本数据输入至初始分类模型,通过所述初始分类模型分别提取所述正样本语句的特征和所述负样本语句的特征;
根据所述正样本语句的特征和所述负样本语句的特征,获取损失,其中,所述损失中包括相似度损失,所述相似度损失根据所述正样本语句的特征和所述负样本语句的特征之间的相似度获得;
根据所述损失,优化所述初始分类模型的参数后,返回执行所述将所述样本数据输入至初始分类模型的步骤,直至所述损失趋于稳定时,将所述初始分类模型作为最终的分类模型。
2.根据权利要求1所述的分类模型构建方法,其特征在于,所述负样本语句和所述正样本语句是从同一个样本语句集合中获取的,所述正样本语句对应着至少一个所述负样本语句。
3.根据权利要求2所述的分类模型构建方法,其特征在于,所述相似度损失的获得过程,包括:
获取所述正样本语句的特征和与所述正样本语句对应的每个所述负样本语句的特征之间的相似度;
分别对每个所述负样本语句,计算所述负样本语句对应的所述相似度加上预设值所得的中间量;
计算每个所述中间量的平均值,将所述平均值作为所述相似度损失。
4.根据权利要求1至3任一项所述的分类模型构建方法,其特征在于,所述特征包括语义特征和句法成分特征;
所述通过所述初始分类模型分别提取所述正样本语句的特征和所述负样本语句的特征,包括:
分别提取所述正样本语句的语义特征和句法成分特征,所述负样本语句的语义特征和句法成分特征;
将所述正样本语句的语义特征和所述正样本语句的句法成分特征整合,获得所述正样本语句的特征;
将所述负样本语句的语义特征和所述负样本语句的句法成分特征整合,获得所述负样本语句的特征。
5.根据权利要求4所述的分类模型构建方法,其特征在于,所述损失中包括标签平滑分类损失,其中,所述标签平滑分类损失,通过对所述正样本语句对应的标签和所述负样本语句对应的标签,进行标签平滑正则化获得。
6.一种文本语句分类方法,其特征在于,包括:
获取待分类文本语句;
将所述待分类文本语句输入至预先训练的分类模型,获得所述分类模型输出的所述待分类文本语句属于每个类别的概率;
根据所述待分类文本语句属于每个类别的概率,确定所述待分类文本语句所属的类别;
其中,所述分类模型的训练过程包括:
获取样本数据,其中,所述样本数据包括正样本语句、所述正样本语句对应的标签、负样本语句和所述负样本语句对应的标签;
将所述样本数据输入至初始分类模型,通过所述初始分类模型分别提取所述正样本语句的特征和所述负样本语句的特征;
根据所述正样本语句的特征和所述负样本语句的特征,获取损失,其中,所述损失中包括相似度损失,所述相似度损失根据所述正样本语句的特征和所述负样本语句的特征之间的相似度获得;
根据所述损失,优化所述初始分类模型的参数后,返回执行所述将所述样本数据输入至初始分类模型的步骤,直至所述损失趋于稳定时,将所述初始分类模型作为最终的分类模型。
7.根据权利要求6所述的文本语句分类方法,其特征在于,所述将所述待分类文本语句输入至预先训练的分类模型,获得所述分类模型输出的所述待分类文本语句属于每个类别的概率,包括:
将所述待分类文本语句输入至预先训练的分类模型;
通过所述分类模型提取所述待分类文本语句的语义特征,以及所述待分类文本语句的句法成分特征,根据所述待分类文本语句的语义特征以及所述句法成分特征,获得所述待分类文本语句属于每个类别的概率并输出。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于万翼科技有限公司,未经万翼科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110185296.9/1.html,转载请声明来源钻瓜专利网。
- 上一篇:显示器及其制备方法
- 下一篇:地铁轨道交通用橡胶垫板及其组合物、制备方法