[发明专利]一种确定新词的方法、装置,计算机设备和介质有效
申请号: | 202011211560.3 | 申请日: | 2020-11-03 |
公开(公告)号: | CN112329443B | 公开(公告)日: | 2023-07-21 |
发明(设计)人: | 张涛;黄少波;曾增烽 | 申请(专利权)人: | 中国平安人寿保险股份有限公司 |
主分类号: | G06F40/216 | 分类号: | G06F40/216;G06F40/284 |
代理公司: | 深圳市世联合知识产权代理有限公司 44385 | 代理人: | 汪琳琳 |
地址: | 518000 广东省深圳市福田区益田路5033号*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本申请实施例属于数据分析技术领域,涉及一种确定新词的方法,包括:获取目标文本数据;利用N‑gram算法对目标文本数据进行切分处理,得到多个词片段;统计字符长度大于1的每个词片段在目标文本数据中出现的次数,确定每个词片段在多个词片段中出现的第一概率;利用EM算法对第一概率进行更新,确定每个词片段对应的第二概率;根据第二概率和预设的互信息计算公式,计算每个词片段的互信息;根据第二概率、预设的左邻接熵计算公式和预设的右邻接熵计算公式,分别计算每个词片段的左邻接熵和右邻接熵;将互信息、左邻接熵和右邻接熵输入预设的新词评价算法,根据输出结果确定每个词片段是否为新词。本申请还涉及区块链技术,以使新词存储于区块链中。 | ||
搜索关键词: | 一种 确定 新词 方法 装置 计算机 设备 介质 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国平安人寿保险股份有限公司,未经中国平安人寿保险股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202011211560.3/,转载请声明来源钻瓜专利网。