[发明专利]分词处理方法及装置有效
申请号: | 201811129922.7 | 申请日: | 2018-09-27 |
公开(公告)号: | CN110969016B | 公开(公告)日: | 2023-06-23 |
发明(设计)人: | 张鹏 | 申请(专利权)人: | 普天信息技术有限公司 |
主分类号: | G06F40/289 | 分类号: | G06F40/289 |
代理公司: | 北京路浩知识产权代理有限公司 11002 | 代理人: | 苗青盛;李相雨 |
地址: | 100080 北京*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明实施例提供一种分词处理方法及装置。所述方法包括:获取待处理语句的预分词结果以及所述预分词结果中的分词的标签参数,其中,所述预分词结果中包括依次排列的至少两个所述分词;根据所述分词的排列次序,依次将所述标签组成原始路径;其中,所述原始路径中包括每个所述分词的一个标签;根据预设算法,确定所述原始路径中综合点互信息值最大的目标路径,将所述目标路径对应的标签内容作为分词结果;其中,所述综合点互信息值为所述原始路径中的标签概率与点互信息值的乘积。本发明实施例解决了现有技术中,分词过程中对依赖于语料库的依赖程度较高的问题。 | ||
搜索关键词: | 分词 处理 方法 装置 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于普天信息技术有限公司,未经普天信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201811129922.7/,转载请声明来源钻瓜专利网。