[发明专利]文本分类方法、装置和电子设备在审
申请号: | 202010540067.X | 申请日: | 2020-06-12 |
公开(公告)号: | CN111737464A | 公开(公告)日: | 2020-10-02 |
发明(设计)人: | 上官亚力;梁兆豪 | 申请(专利权)人: | 网易(杭州)网络有限公司 |
主分类号: | G06F16/35 | 分类号: | G06F16/35;G06F16/33;G06F40/30 |
代理公司: | 北京超成律师事务所 11646 | 代理人: | 张芮 |
地址: | 310052 浙江省杭州*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 文本 分类 方法 装置 电子设备 | ||
1.一种文本分类方法,其特征在于,所述方法包括:
将目标文本转换为与所述目标文本相匹配的符号串;
将所述符号串输入至预先训练完成的分类模型中,其中,所述分类模型包括第一子模型和第二子模型;
通过所述第一子模型对所述符号串进行特征提取,得到所述符号串的多组特征数据;
通过所述第二子模型对所述多组特征数据进行分类,得到所述目标文本的分类结果。
2.根据权利要求1所述的方法,其特征在于,将目标文本转换为与所述目标文本相匹配的符号串的步骤,包括:
提取所述目标文本中的分词;
根据预设的分词与符号对照字典,将所述目标文本中的每个所述分词转换为相应的符号;将每个所述分词对应的符号,组成与所述目标文本相匹配的字符串。
3.根据权利要求2所述的方法,其特征在于,提取所述目标文本中的分词的步骤,包括:
删除所述目标文本中的无效字符;其中,所述无效字符包括空格、表情、URL地址和系统标识;
按照预设规则,从删除无效字符后的所述目标文本中提取分词。
4.根据权利要求1所述的方法,其特征在于,所述第一子模型包括多个并联的特征提取组件;每个所述特征提取组件用于输出所述符号串的一组特征数据;所述通过所述第二子模型对所述多组特征数据进行分类,得到所述目标文本的分类结果的步骤,包括:
通过所述第二子模型接收多个所述特征提取组件输出的多组特征提取数据;
通过所述第二子模型计算所述多组特征数据的平均特征值,将所述平均特征值输入至预设的分类器中,输出所述目标文本的分类结果。
5.根据权利要求1所述的方法,其特征在于,所述分类模型通过下述方式训练得到:
对预设的样本集合进行划分,得到多个子集合;
基于所述多个子集合,训练所述第一子模型的初始模型,得到训练后的第一子模型;
将所述多个子集合中的样本输入至所述训练后的第一子模型,输出所述多个子集合中的样本对应的样本特征;
基于所述样本特征,训练所述第二子模型的初始模型,得到训练后的第二子模型。
6.根据权利要求5所述的方法,其特征在于,所述样本集合通过下述方式确定:
设置预设样本的类别标签;
计算所述预设样本中每个字符对应的分词的特征值;所述特征值包括:词频和逆文本频率指数;
采用预设分词对应的字符替换所述预设样本中所述特征值低于预设阈值的字符,得到扩增样本,在所述扩增样本上设置所述预设样本对应的类别标签;
将设置有类别标签的所述预设样本和所述扩增样本,确定为所述样本集合。
7.根据权利要求5所述的方法,其特征在于,所述第一子模型对应的初始模型包括多个并联的特征提取组件;所述基于所述多个子集合,训练所述第一子模型的初始模型,得到最终的第一子模型的步骤,包括:
针对每个所述特征提取组件,执行下述操作:
从所述多个子集合中,确定当前特征提取组件的测试集合;将所述多个子集合中除所述测试集合之外的子集合,确定为所述当前特征提取组件的训练集合;
从所述训练集合中确定目标样本;
将所述目标样本输入所述当前特征提取组件中,得到输出结果;
基于所述输出结果,计算预设损失函数的损失值;继续执行从所述训练集合中确定目标样本的步骤,直到所述损失值收敛,得到训练后的当前特征提取组件。
8.根据权利要求7所述的方法,其特征在于,从所述多个子集合中,确定当前特征提取组件的测试集合的步骤,包括:
根据多个所述特征提取组件中除所述当前特征提取组件之外的特征提取组件对应的测试集合,以及所述多个子集合,确定所述当前特征提取组件对应的测试集合,以使每个所述特征提取组件对应不同的测试集合。
9.根据权利要求7所述的方法,其特征在于,所述特征提取组件包括Bert模型;所述预设损失函数包括focalloss损失函数。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于网易(杭州)网络有限公司,未经网易(杭州)网络有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010540067.X/1.html,转载请声明来源钻瓜专利网。