[发明专利]词链模型的生成方法、装置、设备及计算机可读存储介质有效
申请号: | 201811462225.3 | 申请日: | 2018-11-30 |
公开(公告)号: | CN109753648B | 公开(公告)日: | 2022-12-20 |
发明(设计)人: | 黄越;陈明东 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
主分类号: | G06F40/284 | 分类号: | G06F40/284;G06F40/247 |
代理公司: | 深圳市世纪恒程知识产权代理事务所 44287 | 代理人: | 胡海国 |
地址: | 518000 广东省深圳市福田区福*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 模型 生成 方法 装置 设备 计算机 可读 存储 介质 | ||
1.一种词链模型的生成方法,其特征在于,所述词链模型的生成方法包括以下步骤:
读取预设标准词库中的标准词以及与所述标准词对应的各目标分词,将各所述目标分词拆分为单个的目标汉字;
根据所述预设标准词库中的各标准分词,确定各所述目标汉字在各层级上的字链模型,其中所述层级的级数与所述标准词中汉字的数量对应;
将各所述目标汉字在各层级上的字链模型进行合并,生成所述标准词在各层级上的分词集合,并根据所述分词集合,形成所述标准词的词链模型;
所述根据所述预设标准词库中的各标准分词,确定各所述目标汉字在各层级上的字链模型的步骤包括:
将各所述目标汉字和各所述标准分词对比,确定包含各所述目标汉字的目标标准分词;
统计各所述目标标准分词中所包括的汉字个数,将具有相同所述汉字个数的各目标标准分词形成各所述目标汉字在各层级上的字链模型;
所述将各所述目标汉字在各层级上的字链模型进行合并,生成所述标准词在各层级上的分词集合的步骤包括:
读取各所述目标汉字所生成的各所述字链模型中在同一层级上的目标字链模型,并将各所述目标字链模型中所具有的所述目标标准分词进行合并,形成字链集合;
判断所述字链集合中是否存在重复的所述目标标准分词,若存在重复的所述目标标准分词,则将重复的所述目标标准分词从所述字链集合中删除,并检测各所述目标汉字在各层级上是否均形成所述字链集合;
若各所述目标汉字在各层级上均形成所述字链集合,则将各所述字链集合确定为所述标准词在各层级上的分词集合。
2.如权利要求1所述的词链模型的生成方法,其特征在于,所述根据所述分词集合,形成所述标准词的词链模型的步骤包括:
将所述标准词和各层级上分词集合中的目标标准分词对比,从各层级上的分词集合中确定包括各个数量所述目标汉字的目标分词集合;
当所述目标分词集合中的目标标准分词包括所述目标汉字的数量和所述标准词中汉字数量一致时,将各所述目标分词集合形成所述标准词在各所述层级上的词链模型。
3.如权利要求2所述的词链模型的生成方法,其特征在于,所述将具有相同所述汉字个数的各目标标准分词形成各所述目标汉字在各层级上的字链模型的步骤之后包括:
判断所述目标汉字中是否存在重复汉字,若存在所述重复汉字,则对存在所述重复汉字的所述目标汉字,在各层级上字链模型中的目标标准分词设置字链权重。
4.如权利要求3所述的词链模型的生成方法,其特征在于,所述将各所述目标分词集合形成所述标准词在各所述层级上的词链模型的步骤包括:
检测各所述目标分词集合中是否包括携带有预设权重标识符的权重标准分词,若包括携带有预设权重标识符的权重标准分词,则读取与所述预设权重标识符对应的字链权重;
将对应的所述字链权重添加到各所述目标分词集合中的权重标准分词上,并将经添加所述字链权重后的各所述目标分词集合形成所述标准词在各所述层级上的词链模型。
5.如权利要求1-4任一项所述的词链模型的生成方法,其特征在于,所述形成所述标准词的词链模型的步骤之后包括:
对所述标准词添加完成标识符,并判断所述预设标准词库中的标准词是否均携带所述完成标识符;
若均携带所述完成标识符,则完成所述预设标准词库中各所述标准词的词链模型的生成;
若不均携带所述完成标识符,执行读取预设标准词库中的标准词以及与所述标准词对应的各目标分词的步骤,且所读取的标准词为不携带完成标识符的标准词。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811462225.3/1.html,转载请声明来源钻瓜专利网。
- 上一篇:段落的划分方法及装置
- 下一篇:基于细粒度匹配信号的文本相关性度量方法和系统