[发明专利]网页数据的收集方法及装置

说明书

本申请公开了一种网页数据的收集方法及装置。该方法包括：在网页加载过程中，获取第一调用信息，并将第一调用信息存储至预设全局数组，其中，第一调用信息为网页中部署脚本对网页中基础脚本发起调用的信息；在网页上加载基础脚本；在基础脚本加载完成之后，确定目标函数，其中，目标函数为预设全局数组中的第一调用信息在基础脚本中对应的函数；以及通过执行目标函数对网页进行数据收集。通过本申请，解决了相关技术中收集网页数据的准确性较低的问题。

技术领域

本申请涉及互联网领域，具体而言，涉及一种网页数据的收集方法及装置。

背景技术

目前，主流网页分析工具使用布置在网页上的采集程序(例如：JavaScriptTracker)在网页端收集访问者访问行为和系统信息数据，发送至数据仓库服务器。JavaScript Tracker代码分为两部分：基础脚本是一个可供外界调用的函数类库；部署脚本用来发起对基础脚本的调用。由于部署脚本中的一些调用信息对基础脚本中的函数调用发生在基础脚本加载完成之前，但是在基础脚本加载完成之前无法对基础脚本进行调用，从而使在基础脚本加载完成之前的对基础脚本中的一些函数调用发生失败，导致收集网页数据的准确性较低。

针对相关技术中收集网页数据的准确性较低的问题，目前尚未提出有效的解决方案。

发明内容

本申请的主要目的在于提供一种网页数据的收集方法及装置，以解决相关技术中收集网页数据的准确性较低的问题。

为了实现上述目的，根据本申请的一个方面，提供了一种网页数据的收集方法。该方法包括：在网页加载过程中，获取第一调用信息，并将第一调用信息存储至预设全局数组，其中，第一调用信息为网页中部署脚本对网页中基础脚本发起调用的信息；在网页上加载基础脚本；在基础脚本加载完成之后，确定目标函数，其中，目标函数为预设全局数组中的第一调用信息在基础脚本中对应的函数；以及通过执行目标函数对网页进行数据收集。

进一步地，在基础脚本加载完成之后，在确定目标函数之前，该方法还包括：检测是否接收到第二调用信息；如果接收到第二调用信息，解析第二调用信息，确定目标函数包括：确定预设全局数组中的第一调用信息在基础脚本中对应的函数以及第二调用信息在基础脚本中对应的函数；将预设全局数组中的第一调用信息在基础脚本中对应的函数以及第二调用信息在基础脚本中对应的函数作为目标函数。

进一步地，第一调用信息包括多个调用子信息，确定目标函数包括：遍历预设全局数组中的多个调用子信息确定多个调用子信息在基础脚本中对应的函数。

进一步地，将第一调用信息存储至预设全局数组包括：调用预设全局数组中的Push函数将第一调用信息存入预设全局数组。

进一步地，在网页上加载基础脚本时采用异步加载。

为了实现上述目的，根据本申请的另一方面，提供了一种网页数据的收集装置。该装置包括：获取单元，用于在网页加载过程中，获取第一调用信息，并将第一调用信息存储至预设全局数组，其中，第一调用信息为网页中部署脚本对网页中基础脚本发起调用的信息；加载单元，用于在网页上加载基础脚本；确定单元，用于在基础脚本加载完成之后，确定目标函数，其中，目标函数为预设全局数组中的第一调用信息在基础脚本中对应的函数；以及收集单元，用于通过执行目标函数对网页进行数据收集。

进一步地，该装置还包括：检测单元，用于检测是否接收到第二调用信息；解析单元，用于在接收到第二调用信息的情况下，解析第二调用信息，确定单元还用于确定预设全局数组中的第一调用信息在基础脚本中对应的函数以及第二调用信息在基础脚本中对应的函数；将预设全局数组中的第一调用信息在基础脚本中对应的函数以及第二调用信息在基础脚本中对应的函数作为目标函数。

进一步地，第一调用信息包括多个调用子信息，确定单元还用于遍历预设全局数组中的多个调用子信息确定多个调用子信息在基础脚本中对应的函数。