[发明专利]一种基于固定电话爬取信息的方法、计算设备及存储介质

权利要求书

1.一种基于固定电话爬取信息的方法，其特征在于，包括：

获取源数据，所述源数据包括M个固定电话，M为大于1的整数；

将所述源数据缓存到第一消息队列；

从所述第一消息队列中读取待处理的固定电话，在目标网站上爬取所述待处理的固定电话对应的地址信息；

在爬取到所述待处理的固定电话对应的地址信息时，将所述待处理的固定电话和所述待处理的固定电话对应的地址信息存入第一数据库。

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：

在未爬取到所述待处理的固定电话对应的地址信息时，存储用于指示所述待处理的固定电话爬取失败的指示信息。

3.根据权利要求2所述的方法，其特征在于，所述在爬取到所述待处理的固定电话对应的地址信息时，将所述待处理的固定电话和所述待处理的固定电话对应的地址信息存入第一数据库之前，所述方法还包括，按照所述第一消息队列中固定电话的缓存次序，将所述待处理的固定电话的爬取结果缓存到第二消息列队，所述爬取结果包括爬取到的所述待处理的固定电话对应的地址信息或用于指示所述待处理的固定电话爬取失败的指示信息；

所述将所述待处理的固定电话和所述待处理的固定电话对应的地址信息存入所述第一数据库，包括：将所述第一消息队列中的第i个电话号码和所述第二消息队列中第i个爬取结果存储到所述第一数据库，i为不大于M的整数。

4.根据权利要求3所述的方法，其特征在于，所述爬取结果包括指示标识和内容，所述第i个爬取结果的标识用于指示所述第i个电话号码爬取成功或失败，所述第i个爬取结果的内容包括爬取到的所述第i个电话号码对应的地址信息。

5.根据权利要求1-2所述的方法，其特征在于，所述将所述源数据缓存到第一消息队列，包括：

将从第二数据库中读取到的固定电话存入第一消息队列；

判断所述第一消息队列的数据量是否大于第一阈值；

若所述第一消息队列中的数据量大于第一阈值，执行所述从所述第一消息队列中读取待处理的固定电话，在目标网站上爬取所述待处理的固定电话对应的地址信息的操作；

若所述第一消息队列的数据量不大于所述第一阈值，则执行所述将从第二数据库中读取到的固定电话存入第一消息队列。

6.根据权利要求4所述的方法，其特征在于，所述待处理的固定电话包括N个固定电话，N为不小于2的正整数，所述从所述第一消息队列中读取待处理的固定电话，在目标网站上爬取所述待处理的固定电话对应的地址信息，包括：

将所述N个固定电话分别输入到N个目标网站；

在第一目标网站上爬取输入到所述第一目标网站的固定电话对应的地址信息，其中，所述第一目标网站为所述N个目标网站中的任意一个目标网站。

7.根据权利要求1-5任一项所述的方法，其特征在于，所述在目标网站上爬取所述待处理的固定电话对应的地址信息，包括：

在目标网站上爬取所述待处理的固定电话对应搜索结果；

从所述搜索结果中提取所述待处理的固定电话对应的地址信息，所述地址信息包括地址、企业的名称、企业简介等中的至少一种。

8.一种基于固定电话爬取信息的的计算设备，其特征在于，包括：

主处理模块，用于获取源数据，所述源数据包括M个固定电话，M为大于1的整数；

第一缓存器，用于将所述源数据缓存到第一消息队列；

子处理模块，用于从所述第一消息队列中读取待处理的固定电话，在目标网站上爬取所述待处理的固定电话对应的地址信息；

主存储器，用于在爬取到所述待处理的固定电话对应的地址信息时，将所述待处理的固定电话和所述待处理的固定电话对应的地址信息存入第一数据库。