[发明专利]确定文档中核心地理信息的方法、系统有效
申请号: | 200810135525.0 | 申请日: | 2008-08-29 |
公开(公告)号: | CN101661461A | 公开(公告)日: | 2010-03-03 |
发明(设计)人: | 雷国平;李晓拴;马娜;刘维佳;陈传文;王名悠;周洪喜;王暄 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06F17/27 | 分类号: | G06F17/27 |
代理公司: | 北京集佳知识产权代理有限公司 | 代理人: | 逯长明 |
地址: | 英属开曼群岛大开曼*** | 国省代码: | 开曼群岛;KY |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 确定 文档 核心 地理信息 方法 系统 | ||
1.一种确定文档中核心地理信息的方法,其特征在于,包括:
读取待处理文档,统计待处理文档中出现的各地理名词的频率,按照文档 中各地理名词出现的频率,并根据预定义的位置权重计算各地理名词的分值;
根据各地理名词查询预置的地理信息库,计算所述各地理名词隶属的级别 相同的行政区划的分值;所述地理信息库中存储有地理名称以及所有地理名称 间的隶属关系;
比较所述行政区划的分值,以及比较各地理名词的分值,将分值最高的所 述行政区划下分值最高的地理信息确定为所述文档的核心地理信息;
其中,所述按照文档中各地理名词出现的频率,并根据预定义的位置权重 计算各地理名词的分值,包括:
将文档各地理信息的分值确定为该地理信息出现频率数与按照出现位置 对应权重之和。
2.如权利要求1所述的方法,其特征在于,所述按照出现位置对应权重 包括:
在标题中出现时权重为3,在正文第一段出现时权重为2,在正文其它部 分中出现时权重为1。
3.如权利要求1所述的方法,其特征在于,所述按照文档中各地理名词 出现的频率,并根据预定义的位置权重计算各地理名词的分值,还包括:
对于连续出现的地理名词,将其中每一个地理名词对应分值增加一个预设 值。
4.如权利要求1所述的方法,其特征在于,所述按照文档中各地理名词 出现的频率,并根据预定义的位置权重计算各地理名词的分值,还包括:
如果文档中的地理名词的前后紧邻的文字中存在预置的新闻机构名称表 中的词汇,则将所述地理名词的该次出现忽略。
5.一种确定文档中核心地理信息的系统,其特征在于,包括:
第一分值计算单元,用于读取待处理文档,统计待处理文档中出现的各地 理名词的频率,按照文档中各地理名词出现的频率,并根据预定义的位置权重 计算各地理名词的分值;
第二分值计算单元,用于根据各地理名词查询预置的地理信息库,计算所 述各地理名词隶属的级别相同的行政区划的分值;所述地理信息库中存储有地 理名称以及所有地理名称间的隶属关系;
确定单元,用于比较所述行政区划的分值,以及比较各地理名词的分值, 将分值最高的所述行政区划下分值最高的地理信息确定为所述文档的核心地 理信息;
其中,所述第一分值计算单元包括:
词频计算单元,用于计算地理信息的出现频率;
位置权重计算单元,用于计算所述地理信息按照出现位置对应的权重;
求和单元,用于将所述地理信息的出现频率与按照位置对应权重之和确定 为该地理信息的分值。
6.如权利要求5所述的系统,其特征在于,所述第一分值计算单元还包 括:
分值增加单元,对于连续出现的地理名词,用于将其中每一个地理名词对 应分值增加一个预设值。
7.如权利要求5所述的系统,其特征在于,所述第一分值计算单元还包 括:
滤除单元,用于在词频计算单元计算地理信息的出现频率过程中,如果地 理名词的前后紧邻的文字中存在预置的新闻机构名称表中的词汇,将所述地理 名词的该次出现忽略。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/200810135525.0/1.html,转载请声明来源钻瓜专利网。