[发明专利]一种分词方法及装置在审
申请号: | 201510179858.3 | 申请日: | 2012-10-23 |
公开(公告)号: | CN104765724A | 公开(公告)日: | 2015-07-08 |
发明(设计)人: | 李成华;王峰 | 申请(专利权)人: | 海信集团有限公司 |
主分类号: | G06F17/27 | 分类号: | G06F17/27 |
代理公司: | 青岛联智专利商标事务所有限公司 37101 | 代理人: | 邵新华 |
地址: | 266100 山*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 分词 方法 装置 | ||
1.一种分词方法,其特征在于,包括以下步骤:
获得待处理的字符串;
根据正向最大匹配法和逆向最大匹配法,把所述待处理的字符串与通用词典库分别进行匹配,得到二个匹配结果;
判断所述二个匹配结果中的词组数值和单字数值是否都相等;
若相等,输出所述字符串的匹配结果。
2.如权利要求1所述的方法,其特征在于,所述判断所述二个匹配结果中的词组数值和单字数值是否都相等,具体包括:
判断所述二个匹配结果中的词组数值是否相等,若所述词组数值不相等,则输出词组数值小的匹配结果。
3.如权利要求1所述的方法,其特征在于,所述判断所述二个匹配结果中的词组数值和单字数值是否都相等,具体包括:
判断所述二个匹配结果中的词组数值是否相等,若所述词组数值相等,则判断所述二个匹配结果中的单字数值是否相等,若所述单字数值不相等,则输出单字数值小的匹配结果。
4.如权利要求1所述的方法,其特征在于,在获得待处理的字符串之前还包括步骤:加载所述通用词典库,所述通用词典库中包括专用词典库。
5.如权利要求4所述的方法,其特征在于,在加载所述通用词典库之前还包括步骤:对所述专用词典库进行分类。
6.如权利要求5所述的方法,其特征在于,在所述判断所述二个匹配结果中的词组数值是否相等,还包括步骤:若所述词组数值相等,将所述二个匹配结果中包括的词组分别按照类别与分类后的所述专用词典库中的词组进行匹配。
7.如权利要求5所述的方法,其特征在于,在所述判断所述二个匹配结果中的词组数值不相等,还包括步骤:将所述二个匹配结果中包括的词组分别按照类别与分类后的所述专用词典库中的词组进行匹配。
8.如权利要求1所述的方法,其特征在于,在获得待处理的字符串之前还包括步骤:加载所述通用词典库,所述通用词典库中包括停用词扩展词典库。
9.一种分词装置,其特征在于,包括:
获取模块,用于获得待处理的字符串;
匹配模块,用于根据正向最大匹配法和逆向最大匹配法,把所述待处理的字符串与通用词典库分别进行匹配,得到二个匹配结果;
判断模块,用于判断所述二个匹配结果中的词组数值和单字数值是否都相等,若相等,输出所述字符串的匹配结果。
10.如权利要求9所述的装置,其特征在于,所述判断模块还包括,具体用于:
若所述词组数值不相等,则输出词组数值小的匹配结果。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于海信集团有限公司,未经海信集团有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201510179858.3/1.html,转载请声明来源钻瓜专利网。