[发明专利]一种实现网站图片爬虫的方法、装置、设备及存储介质

权利要求书

1.一种实现网站图片爬虫的方法，其特征在于，包括如下步骤：

S1、根据用户输入的访问信息访问图片服务器，并获取当前访问的图片服务器网站的当前页面的所有图片信息；

S2、筛选出当前页面需要下载的图片，将需要下载的图片加入下载队列中，并将所述下载队列中的图片逐一下载；

S3、当所述下载队列中的图片都下载完成后，对当前页面进行翻页下拉处理，并在下拉处理成功时，获取下拉后的页面的所有图片信息，并重复步骤S2；

S4、当下拉处理不成功时，调用Autoit控件，以实现所有下载的图片的自动保存，其中，所述Autoit控件中设置有通过Autoit编写windows框架脚本，所述windows框架脚本用于将图片自动保存至预设目录下；

所述步骤S2具体包括：

S21、逐一获取当前页面的各个图片信息，根据预设的下载规则判断各个图片是否需要下载；

S22、当当前所有的图片均判断完毕后，删除不需要下载的图片信息，并将需要下载的图片加入下载队列中；

S23、将所述下载队列中的图片逐一下载；

所述预设的下载规则具体为：将当前页面预设位置的图片下载。

2.根据权利要求1所述的实现网站图片爬虫的方法，其特征在于，所述步骤S3具体包括：

S31、当所述下载队列中的图片都下载完成后，对当前页面进行翻页下拉处理；

S32、判断是否下拉出新的页面，如果是则判断当前页面下拉成功，否则判断当前页面下拉不成功；

S33、当当前页面下拉成功时，获取下拉后的页面的所有图片信息，并重复步骤S2，以实现下拉后的页面的图片下载。

3.根据权利要求1所述的实现网站图片爬虫的方法，其特征在于，所述步骤S4中，所述windows框架脚本具体用于：

模拟人工右键点击下载的图片，然后模拟人工选择图片另存的目录，并模拟人工点击确定保存。

4.一种实现网站图片爬虫的装置，其特征在于，包括：

图片信息获取模块，用于根据用户输入的访问信息访问图片服务器，并获取当前访问的图片服务器网站的当前页面的所有图片信息；

图片下载模块，用于筛选出当前页面需要下载的图片，将需要下载的图片加入下载队列中，并将所述下载队列中的图片逐一下载；

页面下拉模块，用于当所述下载队列中的图片都下载完成后，对当前页面进行翻页下拉处理，并在下拉处理成功时，获取下拉后的页面的所有图片信息，并下载下拉后的页面中的需要下载的图片；

图片保存模块，用于当下拉处理不成功时，调用Autoit控件，以实现所有下载的图片的自动保存，其中，所述Autoit控件中设置有通过Autoit编写windows框架脚本，所述windows框架脚本用于将图片自动保存至预设目录下；

所述图片下载模块具体包括：

下载判断单元，用于逐一获取当前页面的各个图片信息，根据预设的下载规则判断各个图片是否需要下载；

下载队列添加单元，用于当当前所有的图片均判断完毕后，删除不需要下载的图片信息，并将需要下载的图片加入下载队列中；

下载单元，用于将所述下载队列中的图片逐一下载；

所述预设的下载规则具体为：将当前页面预设位置的图片下载。

5.根据权利要求4所述的实现网站图片爬虫的装置，其特征在于，所述图片保存模块中，所述windows框架脚本具体用于：

模拟人工右键点击下载的图片，然后模拟人工选择图片另存的目录，并模拟人工点击确定保存。

6.一种实现网站图片爬虫的设备，其特征在于，包括处理器和存储器；

所述存储器上存储有可被所述处理器执行的计算机可读程序；

所述处理器执行所述计算机可读程序时实现如权利要求1-3任意一项所述的实现网站图片爬虫的方法。

7.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有一个或者多个程序，所述一个或者多个程序可被一个或者多个处理器执行，以实现如权利要求1-3任意一项所述的实现网站图片爬虫的方法中的步骤。