[发明专利]一种网络评论的采集方法及系统有效
申请号: | 201110415749.9 | 申请日: | 2011-12-13 |
公开(公告)号: | CN103164438A | 公开(公告)日: | 2013-06-19 |
发明(设计)人: | 张涛;于晓明;杨建武 | 申请(专利权)人: | 北大方正集团有限公司;北京大学;北京北大方正电子有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京同达信恒知识产权代理有限公司 11291 | 代理人: | 黄志华 |
地址: | 100871 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 网络 评论 采集 方法 系统 | ||
1.一种网络评论的采集方法,其特征在于,包括:
获取一网页入口链接地址;
判断所述网页入口链接地址对应的网页上是否有N个网络评论,其中,所述N为正整数;
在有所述N个网络评论时,判断所述N个网络评论中是否有M个网络评论满足采集的条件,其中,所述M为小于或等于N的正整数;
在有所述M个网络评论满足采集的条件时,采集所述M个网络评论。
2.如权利要求1所述的方法,其特征在于,所述获取一网页入口链接地址具体包括:
获取所述N个网络评论所评论的主题所在的主题网页;
获取所述主题网页的特征码;
获取所述主题所在频道的特征码;以及
拼接所述主题网页的特征码和所述频道的特征码。
3.如权利要求2所述的方法,其特征在于,周期性刷新所述主题网页入口链接地址。
4.如权利要求1所述的方法,其特征在于,当所述网页上的网络评论无更新超过一预定时间,则删除所述网页入口链接地址。
5.如权利要求1所述的方法,其特征在于,所述判断所述N个网络评论中是否有M个网络评论满足采集的条件具体为:计算N和P的差值,如果N大于P,则表示有新的网络评论,且所述新增的网络评论的个数为N和P的差值M,其中P为上次访问所述页面时的网络评论的个数。
6.如权利要求5所述的方法,其特征在于,所述方法还包括:计算所述页面的当前页面上包含的网络评论的个数L,如果所述L小于M,则计算翻页的页数,并抽取与所述页数对应的翻页链接,其中L为正整数。
7.如权利要求5所述的方法,其特征在于,所述方法还包括:将所述N个网络评论中每一个网络评论与所述P个网络评论中每一个网络评论分别进行比对,如果比对结果不同,则抽取所述比对结果不同的M个网络评论。
8.如权利要求1所述的方法,其特征在于,所述判断所述N个网络评论中是否有M个网络评论满足采集的条件具体为:将所述N个网络评论中每一个网络评论与所述P个网络评论中每一个网络评论分别进行比对,如果比对结果不同,则确定所述M个网络评论为满足采集条件的网络评论。
9.如权利要求1所述的方法,其特征在于,所述方法还包括:将抽取的所述M个网络评论内容保存到一不同于所述网页的存储单元。
10.一种网络评论的采集系统,其特征在于,包括:
入口链接获取部件,用于获取一网页入口链接地址;
第一判断部件,用于判断所述网页入口链接地址对应的网页上是否有N个网络评论,其中,所述N为正整数;
第二判断部件,用于在有所述N个网络评论时,判断所述N个网络评论中是否有M个网络评论满足采集的条件,其中,所述M为小于或等于N的正整数;
内容采集部件,用于在有所述M个网络评论满足采集的条件时,采集所述M个网络评论。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北大方正集团有限公司;北京大学;北京北大方正电子有限公司,未经北大方正集团有限公司;北京大学;北京北大方正电子有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201110415749.9/1.html,转载请声明来源钻瓜专利网。
- 上一篇:面向虚拟现实的空间数据引擎方法
- 下一篇:地质信息的处理方法及装置