[发明专利]一种采集网页的方法及系统无效
申请号: | 200610160748.3 | 申请日: | 2006-11-29 |
公开(公告)号: | CN101178713A | 公开(公告)日: | 2008-05-14 |
发明(设计)人: | 杨卫;文杰;王宁 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京同达信恒知识产权代理有限公司 | 代理人: | 宋松 |
地址: | 518044广东省深圳市*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种采集网页的方法及系统,用以解决现有的采集网页的方法不能保证网页集合的高新鲜度的问题。本发明方法在系统中设定更新周期由短到长的至少两个队列;之后包括:系统根据各个队列的更新周期检测该队列中录入的各个网页链接地址URL是否超时;以及当检测到URL超时时,判断该URL中的网页内容是否被更新,若被更新,则将该URL录入比当前所在队列的更新周期次短的队列;否则将该URL录入比当前所在队列的更新周期次长的队列。本发明系统包括:队列设定单元、更新周期检测单元、更新判断单元和录入单元。本发明可保证网页集合的高新鲜度。 | ||
搜索关键词: | 一种 采集 网页 方法 系统 | ||
【主权项】:
1.一种采集网页的方法,其特征在于,在系统中设定更新周期由短到长的至少两个队列;之后,包括下列步骤:系统根据各个队列的更新周期检测该队列中录入的各个网页链接地址URL是否超时;以及当检测到URL超时时,判断该URL中的网页内容是否被更新,若被更新,则将该URL录入比当前所在队列的更新周期次短的队列;否则将该URL录入比当前所在队列的更新周期次长的队列。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/200610160748.3/,转载请声明来源钻瓜专利网。