[发明专利]收集网站信息中有效信息网页的方法、装置及系统无效
| 申请号： | 201210337847.X | 申请日： | 2012-09-12 |
| 公开（公告）号： | CN102867053A | 公开（公告）日： | 2013-01-09 |
| 发明（设计）人： | 周雷;高扬 | 申请（专利权）人： | 北京奇虎科技有限公司;奇智软件（北京）有限公司 |
| 主分类号： | G06F17/30 | 分类号： | G06F17/30 |
| 代理公司： | 北京国昊天诚知识产权代理有限公司 11315 | 代理人： | 许志勇 |
| 地址： | 100088 北京市西城区新*** | 国省代码： | 北京;11 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开一种收集网站信息中有效信息网页的方法、装置及系统，该方法主要包括：根据预先配置的列表页的网址链接模板识别被收集网站中的列表页，获取每个列表页包所含的全部内部网址链接；根据预先配置的商品页的网址链接模板，在每个列表页包含的全部内部网址链接中进行匹配，获取其中商品页的网址链接，其中，所述预先配置的商品页的网址链接模板包含产品属性信息；收集所获取的所有商品页的网址链接。本发明以解决网络爬虫系统中爬取的结果不稳定以及网络爬虫系统消耗很大资源的问题。 | ||
| 搜索关键词： | 收集 网站 信息 有效 网页 方法 装置 系统 | ||
【主权项】：
一种收集网站信息中有效信息网页的方法，其中，包括：根据预先配置的列表页的网址链接模板识别被收集网站中的列表页，获取每个列表页包所含的全部内部网址链接；根据预先配置的商品页的网址链接模板，在每个列表页包含的全部内部网址链接中进行匹配，获取其中商品页的网址链接，其中，所述预先配置的商品页的网址链接模板包含产品属性信息；收集所获取的所有商品页的网址链接。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于北京奇虎科技有限公司;奇智软件（北京）有限公司，未经北京奇虎科技有限公司;奇智软件（北京）有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201210337847.X/，转载请声明来源钻瓜专利网。
- 上一篇：计算机自动安全防护和节能系统及方法
- 下一篇：一种主题对话方法和装置
- 信息记录介质、信息记录方法、信息记录设备、信息再现方法和信息再现设备
- 信息记录装置、信息记录方法、信息记录介质、信息复制装置和信息复制方法
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录设备、信息重放设备、信息记录方法、信息重放方法、以及信息记录介质
- 信息存储介质、信息记录方法、信息重放方法、信息记录设备、以及信息重放设备
- 信息存储介质、信息记录方法、信息回放方法、信息记录设备和信息回放设备
- 信息记录介质、信息记录方法、信息记录装置、信息再现方法和信息再现装置
- 信息终端，信息终端的信息呈现方法和信息呈现程序
- 信息创建、信息发送方法及信息创建、信息发送装置
