[发明专利]文档主题词提取方法及装置有效
申请号: | 201510990608.8 | 申请日: | 2015-12-24 |
公开(公告)号: | CN105630769B | 公开(公告)日: | 2019-04-12 |
发明(设计)人: | 赵博 | 申请(专利权)人: | 东软集团股份有限公司 |
主分类号: | G06F17/27 | 分类号: | G06F17/27 |
代理公司: | 北京英创嘉友知识产权代理事务所(普通合伙) 11447 | 代理人: | 南毅宁;桑传标 |
地址: | 110179 辽*** | 国省代码: | 辽宁;21 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 文档 主题词 提取 方法 装置 | ||
1.一种文档主题词提取方法,其特征在于,所述方法包括:
对目标文档进行分词处理,其中,所述目标文档为文档库中的任一文档;
针对同一分词,根据该分词在所述目标文档中每次出现时的分词属性,获取与所述分词属性相对应的权值,其中,所述获取与所述分词属性相对应的权值,包括:判断所述分词属性是否满足多个预设条件中的至少一个预设条件;在所述分词属性满足至少一个预设条件时,获取所述分词属性所满足的各个预设条件所对应的权值,并将获取到的各个预设条件所对应的权值的乘积作为与所述分词属性相对应的权值;
根据所述与所述分词属性相对应的所述权值,确定该分词在所述目标文档中的词频权重,其中,通过以下方式来确定该分词在所述目标文档中的词频权重:
其中,TFW表示分词的词频权重;Wn表示该分词在所述目标文档中第n次出现时的分词属性所对应的权值;N表示该分词在所述目标文档中的总出现次数;I表示所述目标文档中的分词总数;
基于所述文档库,确定所述分词的逆向文档频率;
基于所述词频权重和所述逆向文档频率,提取预定数量的分词作为所述目标文档的主题词。
2.根据权利要求1所述的方法,其特征在于,所述获取与所述分词属性相对应的权值,还包括:
在所述分词属性不满足任一预设条件时,获取预设的基准权值作为与所述分词属性相对应的权值。
3.根据权利要求2所述的方法,其特征在于,所述分词属性包括分词位置、字体样式、字体号和分词内容;以及,所述多个预设条件包括:分词位置位于段首;分词位置位于标题;分词的字体样式为粗体;分词的字体样式为斜体;分词的字体号大于常规字体号;分词的字体号小于常规字体号;分词内容与预设的干扰词内容相匹配。
4.根据权利要求3所述的方法,其特征在于,所述分词位置位于段首这一预设条件所对应的权值、所述分词位置位于标题这一预设条件所对应的权值、所述分词的字体样式为粗体这一预设条件所对应的权值、所述分词的字体样式为斜体这一预设条件所对应的权值、以及所述分词的字体号大于常规字体号这一预设条件所对应的权值大于所述基准权值;以及
所述分词的字体号小于常规字体号这一预设条件所对应的权值、所述分词内容与预设的干扰词内容相匹配这一预设条件所对应的权值小于所述基准权值。
5.根据权利要求1所述的方法,其特征在于,所述分词属性包括分词位置、字体样式、字体号和分词内容;以及,所述多个预设条件包括:分词位置位于段首;分词位置位于标题;分词的字体样式为粗体;分词的字体样式为斜体;分词的字体号大于常规字体号;分词的字体号小于常规字体号;分词内容与预设的干扰词内容相匹配。
6.根据权利要求1所述的方法,其特征在于,所述基于所述词频权重和所述逆向文档频率,提取预定数量的分词作为所述目标文档的主题词,包括:
计算所述分词的词频权重与逆向文档频率的乘积;
按照所述词频权重与所述逆向文档频率的乘积从大到小的顺序,提取预定数量的分词作为所述目标文档的主题词。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于东软集团股份有限公司,未经东软集团股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201510990608.8/1.html,转载请声明来源钻瓜专利网。
- 上一篇:信息权重的确定方法和装置
- 下一篇:控制文档转换的方法及装置