[发明专利]一种数据埋点分析的方法、设备及系统

说明书

本申请的目的是提供一种数据埋点分析的方法、设备及系统，本申请通过根据新获取的配置版本信息确定发生变更的配置内容，并基于页面上的事件进行埋点定义及投递日志的格式定义；根据定义的投递日志的格式对采集的投递日志进行校验，得到校验后的投递日志；对所述发生变更的配置内容及所述校验后的投递日志进行解析以提取会话上下文标识，并根据预设的聚合规则进行聚合，得到聚合结果；基于所述会话上下文标识及所述聚合结果确定异常对象。进而，极大减少了后期的数据清洗、统计分析的繁琐过程，提高工作效率，并实现智能更自动化的统计分析和精准地用户行为追踪，对用户的行为可进行实时可视化回放，进而提高用户体验。

技术领域

本申请涉及计算机领域，尤其涉及一种数据埋点分析的方法、设备及系统。

背景技术

通常通过一些统计指标，例如，活跃用户数、某个位置的点击率、某个活动的转化率等等来反映一款产品的产品功能，而这些指标的计算都是通过在PC端或者移动端(以下简称”端”)埋点来获取用户行为数据通过大数据的手段进行统计分析得出。

最初的埋点都是通过具体的开发人员在开发阶段针对产品的需求和埋点的定义在某些指定页面或者指定行为上预先编写好相关行为日志投递代码，这样在下个版本发布之后，能够采集到相关的日志信息。然而，在产品快速迭代，需求不断变更的场景下，这种预先定义的方式无法满足多场景的需求，灵变性差，比如想在线上产品上增加埋点，采用这种方式就无法满足，而移动端产品审核发布周期比较长，不像PC端网页内容是由服务端控制呈现的，所以针对移动端只能先把埋点代码加好，等下个版本发布上线。因而无法及时的追踪产品某些功能的效果好坏和用户的体验情况，极端情况下可能导致用户流失的情况发生。

而且由于IOS和安卓两个不同移动端的开发人员属不同组，对埋点定义的理解有偏差可能导致投递出来的日志格式不统一，对后期的数据清洗、统计分析工作都带来了不小的麻烦，而且如果埋点有BUG投递有问题只有通过发版本来修复，频繁的升级势必也会影响用户体验。

由开发人员增加埋点，测试人员进行埋点日志跟踪测试，然后由埋点定义者验收埋点成果，流程繁琐，三方沟通成本非常大，而且一方测试没有通过，要回到起点重新进行回归测试，沟通成本高，需要开发人员投入大量精力在辅助性功能上，工作效率低。

发明内容

本申请的一个目的是提供一种数据埋点分析的系统、方法及其设备，解决实时埋点需求变更、投递日志格式不一致及后期数据分析统计复杂的问题。

根据本申请的一个方面，提供了一种数据埋点分析的系统，所述系统包括：

云端配置模块、客户端模块、数据采集模块、清洗统计模块和异常分析模块，

其中，所述云端配置模块用于埋点定义及投递日志的格式定义；

所述客户端模块用于感知配置变化更新缓存本地配置；

所述数据采集模块用于采集所述客户端模块投递的日志、所述云端配置模块下发的配置内容，并根据定义的投递日志的格式对所述投递的日志进行校验，将校验后的投递日志发送至所述清洗统计模块；

所述清洗统计模块用于将从所述云端配置模块获取的配置内容及所述校验后的投递日志进行解析以提取会话上下文标识，并根据预设的聚合规则进行聚合，将得到的聚合结果发送至所述异常分析模块；

所述异常分析模块用于基于所述会话上下文标识及所述聚合结果确定异常对象。

进一步地，上述系统中，所述客户端模块用于：

对发生变更的配置数据进行解析并缓存后，根据页面的唯一标识获取缓存的配置数据；

在所述页面上加载已注册配置数据的元素事件；

根据触发条件对加载的元素事件进行解析配置日志格式，并提取页面的相关信息发送至所述数据采集模块。