[发明专利]一种互联网信息发掘方法有效
| 申请号： | 201711463752.1 | 申请日： | 2017-12-28 |
| 公开（公告）号： | CN108319651B | 公开（公告）日： | 2022-02-15 |
| 发明（设计）人： | 沈文凯;李广兵;汪洋 | 申请（专利权）人： | 南京烽火星空通信发展有限公司 |
| 主分类号： | G06F16/958 | 分类号： | G06F16/958;G06F16/955 |
| 代理公司： | 南京经纬专利商标代理有限公司 32200 | 代理人： | 杨海军 |
| 地址： | 210019 江苏省南京市建*** | 国省代码： | 江苏;32 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种互联网信息发掘方法，包括：针对互联网站点，归纳其发布网页的规律；针对存在网页发布规律、且发布规律可预测的站点，生成相应的发掘算法，计算当前时刻网页URL生成规则中动态部分的最新值，并输出待采集的URL集合；发布网页URL生成规则，规则包含静态部分与动态部分；发掘行为逻辑，通过网页URL生成规则输出有效的网页URL；采集已生成发掘算法的站点数据，以发掘算法计算生成对应站点的新发布网页URL；网页信息采集程序以发掘算法生成的新发布网页URL为输入进行数据采集。本发明通过一种全新的算法来弥补广度优先搜索算法的缺点，提高互联网采集数据的及时性、完整性和经济性。 | ||
| 搜索关键词： | 一种 互联网 信息 发掘 方法 | ||
【主权项】：
1.一种互联网信息发掘方法，其特征在于，所述方法包括如下步骤：一、针对互联网站点，归纳其发布网页的规律；二、针对存在网页发布规律、且发布规律可预测的站点，生成相应的发掘算法，计算当前时刻网页URL生成规则中动态部分的最新值，并输出待采集的网页URL集合；三、发布网页URL生成规则，规则包含静态部分与动态部分；发掘行为逻辑，通过网页URL生成规则输出有效的网页URL；四、采集已生成发掘算法的站点数据，以发掘算法计算生成对应站点的新发布网页URL；五、网页信息采集程序以发掘算法生成的新发布网页URL为输入进行数据采集。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于南京烽火星空通信发展有限公司，未经南京烽火星空通信发展有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201711463752.1/，转载请声明来源钻瓜专利网。
- 信息记录介质、信息记录方法、信息记录设备、信息再现方法和信息再现设备
- 信息记录装置、信息记录方法、信息记录介质、信息复制装置和信息复制方法
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录设备、信息重放设备、信息记录方法、信息重放方法、以及信息记录介质
- 信息存储介质、信息记录方法、信息重放方法、信息记录设备、以及信息重放设备
- 信息存储介质、信息记录方法、信息回放方法、信息记录设备和信息回放设备
- 信息记录介质、信息记录方法、信息记录装置、信息再现方法和信息再现装置
- 信息终端，信息终端的信息呈现方法和信息呈现程序
- 信息创建、信息发送方法及信息创建、信息发送装置
