[发明专利]为文档添加标签的方法及装置有效
申请号: | 201310254851.4 | 申请日: | 2013-06-24 |
公开(公告)号: | CN104239373B | 公开(公告)日: | 2019-02-01 |
发明(设计)人: | 王佳强 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F16/35 | 分类号: | G06F16/35 |
代理公司: | 广州华进联合专利商标代理有限公司 44224 | 代理人: | 何平;邓云鹏 |
地址: | 518044 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 文档 添加 标签 方法 装置 | ||
1.一种为文档添加标签的方法,包括:
获取输入的文档集合,对所述文档集合中的文档进行分词得到与所述文档对应的单词集合;
根据潜在狄利克雷分配模型将与所述文档对应的单词集合聚合成主题集合;
获取所述主题集合中主题包含的单词的全局词频,根据所述全局词频选取单词设置为所述主题的属性词,所述全局词频为单词在所述文档集合中出现的总次数;
获取所述文档集合中的文档包含的属性词的概率信息,所述属性词的概率信息为文档包含的某个属性词的个数与文档总共包含的属性词的个数的比值,将概率信息大于阈值的属性词作为文档的标签。
2.根据权利要求1所述的为文档添加标签的方法,其特征在于,所述根据潜在狄利克雷分配模型将与所述文档集合聚合生成主题集合的步骤之前还包括:
获取与所述文档对应的单词集合中单词对应的词频和逆向文件频率;
根据所述词频和逆向文件频率对与所述文档对应的单词集合中单词进行过滤。
3.根据权利要求1所述的为文档添加标签的方法,其特征在于,所述根据潜在狄利克雷分配模型将与所述文档对应的单词集合聚合成主题集合的步骤之后还包括:
根据知网中文词库对所述主题集合中主题包含的单词进行扩充。
4.根据权利要求1所述的为文档添加标签的方法,其特征在于,所述根据所述概率信息选取属性词生成所述文档的标签的步骤还包括:
根据知网中文词库提取所述选取到的属性词在所述文档中对应的正向或负向情感信息;
根据所述属性词和所述提取到的相应的正向或负向情感信息生成所述文档的标签。
5.根据权利要求1所述的为文档添加标签的方法,其特征在于,所述获取输入的文档集合的步骤为:
获取输入的类型信息,根据所述类型信息检索得到对应的文档集合;
所述根据所述概率信息选取属性词生成所述文档的标签的步骤之后还包括:
建立所述生成的标签与所述类型信息的对应关系。
6.根据权利要求5所述的为文档添加标签的方法,其特征在于,所述方法还包括:
获取输入的关键词,获取与所述关键词匹配的类型信息;
获取与所述类型信息对应的标签,并展示所述标签;
获取标签选取请求,获取所述标签选取请求对应的标签;
获取包含所述标签的文档。
7.根据权利要求5所述的为文档添加标签的方法,其特征在于,所述根据所述类型信息检索得到对应的文档集合的步骤为:
获取停用词集合,所述停用词表包含停用词;
根据所述类型信息检索与所述类型信息匹配的但不包含所述停用词的文档集合。
8.一种为文档添加标签的装置,其特征在于,包括:
文档分词模块,用于获取输入的文档集合,对所述文档集合中的文档进行分词得到与所述文档对应的单词集合;
主题生成模块,用于根据潜在狄利克雷分配模型将与所述文档对应的单词集合聚合成主题集合;
主题选词模块,用于获取所述主题集合中主题包含的单词的全局词频,所述全局词频为单词在所述文档集合中出现的总次数,根据所述全局词频选取单词设置为所述主题的属性词;
标签添加模块,用于获取所述文档集合中的文档包含的属性词的概率信息,所述属性词的概率信息为文档包含的某个属性词的个数与文档总共包含的属性词的个数的比值,将概率信息大于阈值的属性词作为文档的标签。
9.根据权利要求8所述的为文档添加标签的装置,其特征在于,所述文档分词模块还用于获取与所述文档对应的单词集合中单词对应的词频和逆向文件频率;根据所述词频和逆向文件频率对与所述文档对应的单词集合中单词进行过滤。
10.根据权利要求8所述的为文档添加标签的装置,其特征在于,所述主题生成模块还用于根据知网中文词库对所述主题集合中主题包含的单词进行扩充。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201310254851.4/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种控制器程序下载电路
- 下一篇:一种重油加工方法