[发明专利]一种管理爬虫代理的方法及装置

权利要求书

1.一种管理爬虫代理的方法，其特征在于，所述方法包括：

获取并根据携带有待更新代理的指令，得到所述待更新代理的代理信息，其中，所述待更新代理的代理信息至少包括：所述待更新代理的IP地址、所述待更新代理的名称及所述待更新代理的端口，所述待更新代理的指令为待新增代理的指令和/或待删除代理的指令；

更新所述待更新代理的代理信息，并更新所述待更新代理到代理池。

2.根据权利要求1所述的管理爬虫代理的方法，其特征在于，所述获取并根据携带有待更新代理的指令，得到所述待更新代理的代理信息，包括：

获取并根据携带有所述待更新代理的指令，在所述待更新代理的指令为所述待新增代理的指令时，得到所述待新增代理的代理信息，其中，所述待新增代理的代理信息至少包括：所述待新增代理的IP地址、所述待新增代理的名称及所述待新增代理的端口；

相应的，所述更新所述待更新代理的代理信息，并更新所述待更新代理到代理池，包括：

添加所述待新增代理的代理信息，并添加所述待新增代理到所述代理池。

3.根据权利要求2所述的管理爬虫代理的方法，其特征在于，在所述获取并根据携带有所述待更新代理的指令，在所述待更新代理的指令为所述待新增代理的指令时，得到所述待新增代理的代理信息之后，所述的管理爬虫代理的方法还包括：

根据所述待新增代理的代理信息，向所述待新增代理发送下载第一指定内容的第一下载指令；

在所述待新增代理根据所述第一下载指令成功下载所述第一指定内容时，则所述待新增代理为可用代理；

相应的，所述添加所述待新增代理的代理信息，并添加所述待新增代理到所述代理池，包括：

在所述待新增代理为可用代理时，添加所述可用代理的代理信息，并添加所述可用代理到所述代理池。

4.根据权利要求1所述的管理爬虫代理的方法，其特征在于，所述获取并根据携带有待更新代理的指令，得到所述待更新代理的代理信息，包括：

获取并根据携带有所述待更新代理的指令，在所述待更新代理的指令为所述待删除代理的指令时，得到所述待删除代理的代理信息，其中，所述待删除代理的代理信息至少包括：所述待删除代理的IP地址、所述待删除代理的名称及所述待删除代理的端口；

相应的，所述更新所述待更新代理的代理信息，并更新所述待更新代理到代理池，包括：

删除所述待删除代理的代理信息，并删除所述代理池中的所述待删除代理。

5.根据权利要求4所述的管理爬虫代理的方法，其特征在于，在所述获取并根据携带有所述待更新代理的指令，在所述待更新代理的指令为所述待删除代理的指令时，得到所述待删除代理的代理信息之前，所述的管理爬虫代理的方法还包括：

周期性的获取所述代理池中第一代理的代理信息，并根据所述第一代理的代理信息，向所述第一代理发送下载第二指定内容的第二下载指令，其中，所述第一代理为所述代理池中的任一个代理；

在所述第一代理根据所述第二下载指令不能下载所述第二指定内容时，则所述第一代理为待删除代理。

6.一种管理爬虫代理的装置，其特征在于，所述装置包括：

获取模块，用于获取并根据携带有待更新代理的指令，得到所述待更新代理的代理信息，其中，所述待更新代理的代理信息至少包括：所述待更新代理的IP地址、所述待更新代理的名称及所述待更新代理的端口，所述待更新代理的指令为待新增代理的指令和/或待删除代理的指令；

更新模块，用于更新所述待更新代理的代理信息，并更新所述待更新代理到代理池。

7.根据权利要求6所述的管理爬虫代理的装置，其特征在于，所述获取模块，具体用于：

获取并根据携带有所述待更新代理的指令，在所述待更新代理的指令为所述待新增代理的指令时，得到所述待新增代理的代理信息，其中，所述待新增代理的代理信息至少包括：所述待新增代理的IP地址、所述待新增代理的名称及所述待新增代理的端口；

相应的，所述更新模块，具体用于：

添加所述待新增代理的代理信息，并添加所述待新增代理到所述代理池。