[发明专利]一种基于本体和群智能算法的中文歧义切分方法有效
申请号: | 201710464556.X | 申请日: | 2017-06-19 |
公开(公告)号: | CN107391574B | 公开(公告)日: | 2020-10-16 |
发明(设计)人: | 林焓;薛醒思 | 申请(专利权)人: | 福建工程学院 |
主分类号: | G06F16/33 | 分类号: | G06F16/33;G06F16/332;G06F16/36;G06F40/216;G06F40/295;G06F40/30 |
代理公司: | 福州市鼓楼区京华专利事务所(普通合伙) 35212 | 代理人: | 林云娇 |
地址: | 350000 福建省福州*** | 国省代码: | 福建;35 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供一种基于本体和群智能算法的中文歧义切分方法,包括:获取用户输入的一个问句进行预处理,得到至少一个候选切分方式,形成候选切分方式集合W;利用本体中标注的同义词信息创建同义词簇;并计算词形的词位置e;以三个连续词形为单位,创建双向三元模型、含词位置信息的语义双向三元模型以及含词位置信息的偏好语义双向三元模型,计算每一种候选切分方式在不同模型下出现的概率;利用不同的模型以及考虑句子断点向量的淘汰集,创建单目标优化模型,并通过群智能算法求解最优的句子断点向量,作为最优分词结果。本发明结合本体计算词频,并利用智能群算法求最优句子断点向量,有效降低错误分词结果,大大提高分词准确性。 | ||
搜索关键词: | 一种 基于 本体 智能 算法 中文 歧义 切分 方法 | ||
【主权项】:
一种基于本体和群智能算法的中文歧义切分方法,其特征在于:包括如下步骤:步骤1、获取用户输入的一个问句进行预处理,得到至少一个候选切分方式,形成候选切分方式集合W;步骤2、利用本体中标注的同义词信息创建同义词簇,包括对每一候选切分方式中的每两个连续词形扩展成一个二元同义词簇,每三个连续词形扩展成一个三元同义词簇;步骤3、计算每一候选切分方式中每一词形的词位置e;步骤4、以三个连续词形为单位,考虑其中前两个词和后两个词的词形对当前处理词形出现的概率的影响创建双向三元模型,计算每一种候选切分方式在所述双向三元模型下出现的概率BP;步骤5、以三个连续词形为单位,考虑其中前两个词和后两个词的词形、扩展同义词簇以及词位置对当前处理词形出现的概率的影响创建含词位置信息的语义双向三元模型,计算每一种候选切分方式在所述含词位置信息的语义双向三元模型下出现的概率SWP;步骤6、以三个连续词形为单位,在含词位置信息的语义双向三元模型和双向三元模型的基础上进一步考虑候选切分方式长度以及候选切分方式偏好值对候选切分方式出现的概率的影响创建含词位置信息的偏好语义双向三元模型,计算每一种候选切分方式在所述含词位置信息的偏好语义双向三元模型下出现的概率PSWP;步骤7、利用所述含词位置信息的偏好语义双向三元模型下出现的概率PSWP,并考虑句子断点向量的淘汰集,创建单目标优化模型,并通过群智能算法求解最优的句子断点向量,将其对应的候选切分方式作为最优分词结果。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于福建工程学院,未经福建工程学院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201710464556.X/,转载请声明来源钻瓜专利网。