[发明专利]一种文本信息提取方法、装置、服务器及存储介质在审

专利信息
申请号: 201811317522.9 申请日: 2018-11-07
公开(公告)号: CN109408826A 公开(公告)日: 2019-03-01
发明(设计)人: 谢永恒;段小文;万月亮 申请(专利权)人: 北京锐安科技有限公司
主分类号: G06F17/27 分类号: G06F17/27
代理公司: 北京品源专利代理有限公司 11332 代理人: 孟金喆
地址: 100044 北京市海淀区西小口*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 候选词 词向量 相似度 权重 文本信息提取 存储介质 文本 构建 服务器 候选词转换 处理效率 关联关系 模型确定 算法计算 低维 算法 向量
【说明书】:

发明实施例提供的一种文本信息提取方法、装置、服务器及存储介质。该方法包括:通过Word2Vec模型确定文本中候选词的词向量,并确定不同词向量之间的相似度值;将词向量作为节点,并根据词向量之间的相似度值构建节点之间的边,得到候选词图集;通过TextRank算法,根据所述候选词图集,确定候选词权重;根据候选词权重,确定文本的关键词。通过采用Word2Vec模型将候选词转换为词向量,能够使候选词通过低维的向量进行表示,提高处理效率,通过相似度值计算,并构建图集,能够形象地反映出候选词之间的关联关系,最后通过TextRank算法计算候选词的权重值,从而更加准确全面地确定文本的关键词。

技术领域

本发明实施例涉及文本提取技术领域,尤其涉及一种文本信息提取方法、装置、服务器及存储介质。

背景技术

随着互联网的快速发展,网络的功能越来越全面,网络文章信息的量也快速增长。但是,很多网络文章存在较大的篇幅,人们通常需要消耗大量的时间来阅读整篇文章才能获得关键的新闻信息。对于需要提取文章信息的编辑或者网络的监控人员来说,为了获得关键的文章信息,需要花费大量的时间来阅读大篇幅的文章,大大降低了工作效率。因此,文本关键词和文本摘要的自动提取大大的缩短了人们从大篇幅网络文章中获得关键信息的时间,同时也很好的节约了一些公司或者企业的人力成本。

目前常用的关键词和摘要提取方法为基于TextRank算法的排序方法,TextRank的基本思想基于谷歌的PageRank算法。TextRank一般模型可以表示为一个有向有权图G=(V,E),由点集合V和边集合E组成,E是V×V的子集。In(Vi)为指向该点Vi的点集合,Out(Vi)为点Vi指向的点集合。点Vi的得分定义如下:

其中,d为阻尼系数,取值范围为0到1,代表从图中某一特定点指向其他任意点的概率。

根据上述算法计算权重值需要根据共现关系构建图集,但是这种方法需要事先建立所有点集之间的边,再在其中通过设置的窗口进行选取,得到存在关联关系的边与候选词节点,构建过程繁琐,处理效率低,并且无法得到每条边权重值的相对大小,导致通过TextRank算法得到的关键词或摘要并不全面精准。另外,传统的文字数字化方法形式简单,转换的向量维度较大,不利于计算与处理。

发明内容

本发明实施例提供了一种文本信息提取方法、装置、服务器及存储介质,解决目前应用TextRank算法进行信息提取过程中关键词或摘要获取不全面精准,处理效率低的问题。

第一方面,本发明实施例提供了一种文本信息提取方法,包括:

通过Word2Vec模型确定文本中候选词的词向量,并确定不同词向量之间的相似度值;

将词向量作为节点,并根据词向量之间的相似度值构建节点之间的边,得到候选词图集;

通过TextRank算法,根据所述候选词图集,确定候选词权重;

根据候选词权重,确定文本的关键词。

第二方面,本发明实施例提供了一种文本信息提取装置,所述装置包括:

第一确定模块,用于通过Word2Vec模型确定文本中候选词的词向量,并确定不同词向量之间的相似度值;

第一构建模块,用于将词向量作为节点,并根据词向量之间的相似度值构建节点之间的边,得到候选词图集;

第一权重确定模块,用于通过TextRank算法,根据所述候选词图集,确定候选词权重;

关键词确定模块,用于根据候选词权重,确定文本的关键词。

第三方面,本发明实施例提供了一种服务器,包括:

一个或多个处理器;

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京锐安科技有限公司,未经北京锐安科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201811317522.9/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top