[发明专利]词典扩充方法及装置、电子设备、存储介质在审
申请号: | 201910882071.1 | 申请日: | 2019-09-18 |
公开(公告)号: | CN110717040A | 公开(公告)日: | 2020-01-21 |
发明(设计)人: | 郑立颖;徐亮;金戈 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
主分类号: | G06F16/35 | 分类号: | G06F16/35;G06F16/36 |
代理公司: | 44232 深圳市隆天联鼎知识产权代理有限公司 | 代理人: | 朱黎 |
地址: | 518000 广东省深圳市福田区福*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本公开涉及人工智能技术领域,具体公开了一种词典扩充方法及装置,包括:获取若干样本文本以及获取为样本文本所标注的标签数据;对于根据样本文本所获得的候选词组,根据标签数据进行统计,获得在每一分类维度的各分类类别上包括候选词组的样本文本数量;根据所获得的样本文本数量,计算候选词组在每一分类维度的各分类类别上的卡方值;对于每一分类维度的各分类类别,根据卡方值进行词组筛选,筛选得到的候选词组作为将文本分类至词组自身所对应分类维度下的分类类别的依据;将筛选得到的候选词组和所对应分类维度下对应分类类别关联存储至词典中。从而实现了词典的自动扩充,提高了词典扩充的速率。 | ||
搜索关键词: | 分类维度 候选词组 样本文本 分类类别 标签数据 词组 筛选 人工智能技术 关联存储 文本分类 标注 分类 统计 | ||
【主权项】:
1.一种词典扩充方法,其特征在于,所述词典对应于文本分类模型,所述文本分类模型根据所述词典进行文本分类,所述方法包括:/n获取为所述文本分类模型所采集的若干样本文本,以及获取为所述样本文本所标注的标签数据,所述标签数据指示所述样本文本在所设定分类维度上所归属的分类类别;/n对于根据所述样本文本所获得的候选词组,根据所述标签数据进行统计,获得在每一分类维度的各分类类别上包括所述候选词组的样本文本数量;/n根据所获得的所述样本文本数量,计算所述候选词组在每一分类维度的各分类类别上的卡方值;/n对于每一分类维度的各分类类别,根据所述卡方值进行词组筛选,筛选得到的候选词组作为将文本分类至所述词组自身所对应分类维度下的分类类别的依据;/n将筛选得到的所述候选词组和所对应分类维度下对应分类类别关联存储至所述词典中。/n
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910882071.1/,转载请声明来源钻瓜专利网。