[发明专利]一种用于全媒体科普视窗的分词方法及系统在审
申请号: | 201810696798.6 | 申请日: | 2018-06-29 |
公开(公告)号: | CN108874781A | 公开(公告)日: | 2018-11-23 |
发明(设计)人: | 朱俭;王函石 | 申请(专利权)人: | 北京千松科技发展有限公司 |
主分类号: | G06F17/27 | 分类号: | G06F17/27;G06K9/62 |
代理公司: | 北京高沃律师事务所 11569 | 代理人: | 王戈 |
地址: | 100000 北京市通*** | 国省代码: | 北京;11 |
权利要求书: | 暂无信息 | 说明书: | 暂无信息 |
摘要: | 本发明公开了一种用于全媒体科普视窗的分词方法及系统。所述分词方法包括:获取字符序列;将所述字符序列输入到估值模块进行估值,确定良度值;将所述良度值以及所述字符序列输入到选择模块进行筛选处理,确定具有最大良度值的分割形式;所述具有最大良度值的分割形式为层次化结构;所述层次化结构用于对所述字符序列进行分词;根据所述具有最大良度值的分割形式判断是否需要进行迭代处理,若是,将所述具有最大良度值的分割形式以及所述字符序列输入到所述调整模块进行调整,确定调整后的字符序列并利用所述调整后的字符序列更新所述估值模块内的统计信息。采用本发明所提供的分词方法及系统能够提高分词精准度。 | ||
搜索关键词: | 字符序列 分词 分割 层次化结构 视窗 统计信息 调整模块 迭代处理 选择模块 科普 精准度 筛选 更新 | ||
【主权项】:
1.一种用于全媒体科普视窗的分词方法,其特征在于,所述分词方法应用于估值‑选择‑调整ESA架构;所述ESA架构包括估值模块、选择模块以及调整模块;所述分词方法包括:获取字符序列;所述字符序列包括多个子序列;相邻的两个子序列为邻接子序列对;将所述字符序列输入到所述估值模块进行估值,确定良度值;所述良度值包括所述子序列独立的个体良度值、每对邻接子序列之间的间隔良度值以及所述邻接子序列对的组合良度值;将所述良度值以及所述字符序列输入到所述选择模块进行筛选处理,确定具有最大良度值的分割形式;所述具有最大良度值的分割形式为层次化结构;所述层次化结构用于对所述字符序列进行分词;根据所述具有最大良度值的分割形式判断是否需要进行迭代处理,得到第一判断结果;若所述第一判断结果表示为所述具有最大良度值的分割形式需要进行迭代处理,将所述具有最大良度值的分割形式以及所述字符序列输入到所述调整模块进行调整,确定调整后的字符序列,并利用所述调整后的字符序列更新所述估值模块内的统计信息。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京千松科技发展有限公司,未经北京千松科技发展有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201810696798.6/,转载请声明来源钻瓜专利网。