[发明专利]一种从文本提取所需内容的方法有效
申请号: | 201410667560.2 | 申请日: | 2014-11-19 |
公开(公告)号: | CN104360993B | 公开(公告)日: | 2018-03-30 |
发明(设计)人: | 彭宏利 | 申请(专利权)人: | 广州极盛信息科技开发有限公司 |
主分类号: | G06F17/27 | 分类号: | G06F17/27 |
代理公司: | 广州市越秀区哲力专利商标事务所(普通合伙)44288 | 代理人: | 汤喜友 |
地址: | 510000 广东省广州市*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 文本 提取 内容 方法 | ||
1.一种从文本提取所需内容的方法,其特征在于,包括以下步骤:
步骤1、根据预设的分词包对目标文本进行预处理,以使所述目标文本的每个句子中的每个词赋予词性类别,所述词性类别包括主语、谓语、宾语、定语、状语和补语;
步骤2、接收用户输入的标签,根据预设的分词包对所述标签中的每个词赋予词性类别,根据依存句法提取出所述标签中的主语以及目标查找词,根据同义词词林和语义场的类义词,统计目标文本的每个句子中与所述目标查找词同义的类义词出现的总次数,将总次数超过预设阈值的句子保存至提取库;
步骤3、计算提取库中每个句子各自的向量值,并根据所述向量值计算每两个句子之间的夹角,若出现夹角小于预设角度的两个句子,则随机删除该两个句子中的一个句子;
在步骤1之前还有以下步骤:
步骤11、接收用户设置的关键词和该关键词的权重,以及接收用户上传的文本;
步骤12、根据公式一选取关联度大于预设值的文本作为目标文本;
公式一为:其中,G为文本的关联度,Pn为第n个关键词在文本中出现的次数,Mn为第n个关键词的权重,L为预设次数。
2.如权利要求1所述的方法,其特征在于,当Pn≥L时,Pn取L。
3.如权利要求1所述的方法,其特征在于,L=10。
4.如权利要求1所述的方法,其特征在于,预设值为20%。
5.如权利要求1所述的方法,其特征在于,预设阈值为3。
6.如权利要求1所述的方法,其特征在于,预设角度为0.5°。
7.一种从文本提取所需内容的装置,其特征在于,包括以下模块:
预处理模块,用于根据预设的分词包对目标文本进行预处理,以使所述目标文本的每个句子中的每个词赋予词性类别,所述词性类别包括主语、谓语、宾语、定语、状语和补语;
提取模块,用于接收用户输入的标签,根据预设的分词包对所述标签中的每个词赋予词性类别,根据依存句法提取出所述标签中的主语以及目标查找词,根据同义词词林和语义场的类义词,统计目标文本的每个句子中与所述目标查找词同义的类义词出现的总次数,将总次数超过预设阈值的句子保存至提取库;
去重模块,用于计算提取库中每个句子各自的向量值,并根据所述向量值计算每两个句子之间的夹角,若出现夹角小于预设角度的两个句子,则随机删除该两个句子中的一个句子;
在预处理模块之前还有以下模块:
接收模块,用于接收用户设置的关键词和该关键词的权重,以及接收用户上传的文本;
筛选模块,用于根据公式一选取关联度大于预设值的文本作为目标文本;
公式一为:其中,G为文本的关联度,Pn为第n个关键词在文本中出现的次数,Mn为第n个关键词的权重,L为预设次数。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州极盛信息科技开发有限公司,未经广州极盛信息科技开发有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201410667560.2/1.html,转载请声明来源钻瓜专利网。
- 内容再现系统、内容提供方法、内容再现装置、内容提供装置、内容再现程序和内容提供程序
- 内容记录系统、内容记录方法、内容记录设备和内容接收设备
- 内容服务系统、内容服务器、内容终端及内容服务方法
- 内容分发系统、内容分发装置、内容再生终端及内容分发方法
- 内容发布、内容获取的方法、内容发布装置及内容传播系统
- 内容提供装置、内容提供方法、内容再现装置、内容再现方法
- 内容传输设备、内容传输方法、内容再现设备、内容再现方法、程序及内容分发系统
- 内容发送设备、内容发送方法、内容再现设备、内容再现方法、程序及内容分发系统
- 内容再现装置、内容再现方法、内容再现程序及内容提供系统
- 内容记录装置、内容编辑装置、内容再生装置、内容记录方法、内容编辑方法、以及内容再生方法