[发明专利]网页主题的分类方法及装置有效
申请号: | 201210319285.6 | 申请日: | 2012-08-31 |
公开(公告)号: | CN103678310B | 公开(公告)日: | 2018-04-27 |
发明(设计)人: | 蔡兵 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京三高永信知识产权代理有限责任公司11138 | 代理人: | 关文魁 |
地址: | 518000 广东省深*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 网页 主题 分类 方法 装置 | ||
1.一种网页主题的分类方法,其特征在于,所述方法包括:
提取待分类网页的超文本标记语言HTML源代码中的文字,并对提取的文字进行分词处理,得到一至多个分词结果;
计算每个分词结果的权重值,所述权重值为词频与逆文档频率TFIDF权重、位置权重、分布权重、强调权重和链接权重中的至少一种权重对应的权重值;
根据所述每个分词结果的权重值生成向量空间模型;
以所述向量空间模型作为预先训练得到的分类器的输入对所述待分类网页进行分类,得到所述待分类网页对应预先归纳的每个主题类别的分类值,并根据获取到的分类值对所述待分类网页的主题进行分类。
2.根据权利要求1所述的方法,其特征在于,所述以所述向量空间模型作为预先训练得到的分类器的输入对所述待分类网页进行分类之前,还包括:
收集预设数目个网页,并对所述预设数目个网页的主题进行归纳,得到预先归纳的主题类别;
将预先归纳的各个主题类别分别作为训练样本对所述分类器进行训练。
3.根据权利要求1至2中任一权利要求所述的方法,其特征在于,所述根据获取到的分类值对所述待分类网页的主题进行分类,具体包括:
在获取到的分类值中选择最大分类值,并将所述最大分类值对应的预先归纳的主题类别作为所述待分类网页的主题类别。
4.根据权利要求1至2中任一权利要求所述的方法,其特征在于,所述根据获取到的分类值对所述待分类网页的主题进行分类之前,还包括:
根据所述待分类网页的网页属性,获取所述待分类网页对应的属性值,所述网页属性至少包括网页网址和二级导航;
所述根据获取到的分类值对所述待分类网页的主题进行分类,具体包括:
在获取到的分类值中选择最大分类值,并根据所述最大分类值及所述待分类网页对应的属性值对所述待分类网页的主题进行分类。
5.一种网页主题的分类装置,其特征在于,所述装置包括:
提取模块,用于提取待分类网页的超文本标记语言HTML源代码中的文字;
分词模块,用于对所述提取模块提取的文字进行分词处理,得到一至多个分词结果;
计算模块,用于计算所述分词模块得到的每个分词结果的权重值,所述权重值为词频与逆文档频率TFIDF权重、位置权重、分布权重、强调权重和链接权重中的至少一种权重对应的权重值;
获取模块,根据所述每个分词结果的权重值生成向量空间模型,以所述向量空间模型作为预先训练得到的分类器的输入对所述待分类网页进行分类,得到所述待分类网页对应预先归纳的每个主题类别的分类值;
分类模块,用于根据所述获取模块获取到的分类值对所述待分类网页的主题进行分类。
6.根据权利要求5所述的装置,其特征在于,所述装置,还包括:
归纳模块,用于收集预设数目个网页,并对所述预设数目个网页的主题进行归纳,得到预先归纳的主题类别;
训练模块,用于将所述归纳模块预先归纳的各个主题类别分别作为训练样本对所述分类器进行训练。
7.根据权利要求5至6中任一权利要求所述的装置,其特征在于,所述分类模块,具体用于在获取到的分类值中选择最大分类值,并将所述最大分类值对应的预先归纳的主题类别作为所述待分类网页的主题类别。
8.根据权利要求5至6中任一权利要求所述的装置,其特征在于,所述获取模块,还用于根据所述待分类网页的网页属性,获取所述待分类网页对应的属性值,所述网页属性至少包括网页网址和二级导航;
所述分类模块,具体用于在所述获取模块获取到的分类值中选择最大分类值,并根据所述最大分类值及所述获取模块获取到的所述待分类网页对应的属性值对所述待分类网页的主题进行分类。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201210319285.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种分配网络资源的方法和装置
- 下一篇:一种推荐网址的方法与客户端