[发明专利]生成文本摘要的方法及装置有效
申请号: | 201410759529.1 | 申请日: | 2014-12-11 |
公开(公告)号: | CN104536950B | 公开(公告)日: | 2018-04-20 |
发明(设计)人: | 王丽杰;吴先超;刘占一 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G06F17/27 | 分类号: | G06F17/27 |
代理公司: | 北京天健君律专利代理事务所(普通合伙)11461 | 代理人: | 罗延红,杨艳云 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 生成 文本 摘要 方法 装置 | ||
技术领域
本发明涉及自然语言处理技术领域,尤其涉及一种生成文本摘要的方法及装置。
背景技术
新闻报道的第一段或学术论文中的摘要通常应包含所述新闻报道或学术论文的核心知识,而针对长篇文本进行核心知识提取,一直是自然语言处理的重点任务。该任务有助于用户对长篇文本的内容进行简单的了解,还可以帮助用户确认该长篇文本是否符合其需求,同时节省了阅读时间。
例如,在搜索引擎中,输入搜索词“王菲个人资料”,依照目前的摘要自动生成技术得到的摘要如图1所示,其中仅包含了搜索词中的关键字,并没有给出用户需求的一些资料,从而使得用户无法通过该摘要对长篇文本所表达内容进行了解。
发明内容
本发明实施例的目的在于,提供一种生成文本摘要的方法及装置,能够为用户提供代表核心主题的简短的文本摘要,从而方便用户对长篇文本所表达内容进行了解。
为实现上述发明目的,本发明的实施例提供了一种生成文本摘要的方法,包括:获取内容文本;对所述内容文本进行分句以及词法句法分析,获取多个句子的句法结构;从所述句法结构中提取知识点,并将所述知识点进行合并得到知识网络;根据所述知识网络生成文本摘要。
本发明的实施例还提供了一种生成文本摘要的装置,包括:内容文本获取模块,用于获取内容文本;句法结构获取模块,用于对所述内容文本进行分句以及词法句法分析,获取多个句子的句法结构;知识网络生成模块,用于从所述句法结构中提取知识点,并将所述知识点进行合并得到知识网络;文本摘要生成模块,用于根据所述知识网络生成文本摘要。
本发明实施例提供的生成文本摘要的方法及装置,通过对获取的内容文本进行分句以及词法句法分析得到多个句子的句法结构,从该句法结构中提取知识点,并将知识点进行合并得到知识网络,再根据知识网络最终生成文本摘要,生成的文本摘要可提供代表核心主题的简要介绍,从而使得用户可通过简短的文本摘要对长篇文本所表达内容进行了解。
附图说明
图1是示出现有技术摘要生成技术生成的摘要的示意图;
图2是示出本发明实施例一的生成文本摘要的方法的流程图;
图3是示出本发明实施例一的句子“冰雨是刘德华演唱的歌曲”为例的句法结构示意图;
图4是示出本发明实施例一的句子“冰雨是刘德华演唱的歌曲”为例的知识网络示意图;
图5是示出本发明实施例一的百度词条“王菲”中“个人生活”为例的知识网络示意图;
图6是示出本发明实施例一的百度词条“王菲”中“个人生活”为例生成的文本摘要示意图;
图7是示出本发明实施例二的生成文本摘要的装置的逻辑框图。
具体实施方式
本发明的基本构思是,通过对获取的内容文本进行分句以及词法句法分析得到多个句子的句法结构,从该句法结构中提取知识点,并将知识点进行合并得到知识网络,再根据知识网络生成文本摘要,从而方便用户对长篇文本所表达内容进行了解。
下面结合附图对本发明实施例一种生成文本摘要的方法及装置进行详细描述。
实施例一
图2为本发明实施例一的生成文本摘要的方法的流程图。可在例如搜索引擎服务器上执行所述方法。所述生成文本摘要的方法包括如下步骤:
步骤101:获取内容文本。例如,内容文本可以是用户根据搜索词获取的任一搜索结果条目的内容文本。
步骤102:对所述内容文本进行分句以及词法句法分析,获取多个句子的句法结构。
如前所述,根据本发明的示例性实施例,可以对内容文本进行语料处理得到处理后的多个句子,然后对每个句子进行词法句法分析得到句法结构。具体的,可以按照代表句子结束的标点符号,例如“!”、“。”、“?”,对内容文本进行分句得到多个句子,并依据语序对多个句子进行过滤得到过滤后的多个句子,过滤步骤的目的是去除杂乱无章的句子,再对过滤后的多个句子分别进行指代消解得到语料处理后的多个句子。
优选地,针对每个句子,可以进行如下词法句法分析处理:对所述句子进行分词得到多个分词;从所述多个分词中识别出实体词;对所述多个分词进行词性标注,并根据标注的词性对所述实体词和多个分词进行依存分析得到句法结构。例如,如图3所示,其示出了句子“冰雨是刘德华演唱的歌曲”进行词法句法分析后获得的句法结构。
步骤103:从所述句法结构中提取知识点,并将所述知识点进行合并得到知识网络。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201410759529.1/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种用于优化搜索结果的方法和装置
- 下一篇:高性能互连物理层