[发明专利]数据获取方法及设备

权利要求书

1.一种数据获取方法，其特征在于，所述方法包括：

获取目标页面的统一资源定位符URL和用户认证信息，所述用户认证信息用于指示目标用户登录所述目标页面的认证信息；

根据所述目标页面的URL，调用爬虫脚本获取所述目标页面的登录前页面内容，所述登录前页面内容用于指示在所述目标用户登录之前，所述目标页面的显示内容；

根据所述目标页面的URL以及所述用户认证信息，调用爬虫脚本获取所述目标页面的登录后页面内容，所述登录后页面内容用于指示在所述目标用户登录之后，所述目标页面的显示内容；

根据所述登录前页面内容和所述登录后页面内容获取差异内容，所述目标页面的差异内容用于指示所述登录前页面内容和所述登录后页面内容有差异的内容；

对所述目标页面的差异内容进行漏洞检测。

2.根据权利要求1所述的方法，其特征在于，所述目标页面的URL包括初始URL，获取目标页面的统一资源定位符URL，包括：

将所述初始URL加入所述爬虫脚本的队列中；

执行所述爬虫脚本的程序，并获取第一请求结果；

对所述第一请求结果进行解析，并获取第一URL，所述目标页面的URL包括所述第一URL。

3.根据权利要求1所述的方法，其特征在于，根据所述目标页面的URL，调用爬虫脚本获取所述目标页面的登录前页面内容，包括：

根据所述目标页面的URL，向至少一个服务器发送请求信息；

接收所述至少一个服务器返回的页面内容，并得到所述目标页面的登录前页面内容。

4.根据权利要求1所述的方法，其特征在于，

所述登录前页面内容用于指示所述登录前页面的超文本标记语言文档对象模型HTMLDOM树结构。

5.一种电子设备，其特征在于，所述电子设备包括：获取模块、第一爬虫模块、第二爬虫模块、差异模块和漏洞检测模块；

其中，所述获取模块，用于获取目标页面的统一资源定位符URL和用户认证信息，所述用户认证信息用于指示目标用户登录所述目标页面的认证信息；

所述第一爬虫模块，用于根据所述目标页面的URL，调用爬虫脚本获取所述目标页面的登录前页面内容，所述登录前页面内容用于指示在所述目标用户登录之前，所述目标页面的显示内容；

所述第二爬虫模块，用于根据所述目标页面的URL以及所述用户认证信息，调用爬虫脚本获取所述目标页面的登录后页面内容，所述登录后页面内容用于指示在所述目标用户登录之后，所述目标页面的显示内容；

所述差异模块，用于根据所述登录前页面内容和所述登录后页面内容获取差异内容，所述目标页面的差异内容用于指示所述登录前页面内容和所述登录后页面内容有差异的内容；

所述漏洞检测模块，用于对所述目标页面的差异内容进行漏洞检测。

6.根据权利要求5所述的电子设备，其特征在于，所述目标页面的URL包括初始URL，所述获取模块包括：初始单元、执行单元和解析单元；

其中，所述初始单元，用于将所述初始URL加入所述爬虫脚本的队列中；

所述执行单元，用于执行所述爬虫脚本的程序，并获取第一请求结果；

所述解析单元，用于对所述第一请求结果进行解析，并获取第一URL，所述目标页面的URL包括所述第一URL。

7.根据权利要求5所述的电子设备，其特征在于，所述第一爬虫模块包括：请求单元和接收单元；

所述请求单元，用于根据所述目标页面的URL，向至少一个服务器发送请求信息；

所述接收单元，用于接收所述至少一个服务器返回的页面内容，并得到所述目标页面的登录前页面内容。

8.根据权利要求7所述的电子设备，其特征在于，

所述登录前页面内容用于指示所述登录前页面的超文本标记语言文档对象模型HTMLDOM树结构。