[发明专利]一种辅助保险类电商运营快速决策工作的方法及系统

权利要求书

1.一种辅助保险类电商运营快速决策工作的方法，其特征在于，包括如下步骤：

步骤1、收集源数据并通过ETL存储在ods层中，所述源数据包括实时数据源和离线数据源；

步骤2、对ods层数据进行规整化处理，建设dw层的事实表数据仓库模型；

步骤3、设计dw层的公共维表，计算离线指标和实时指标，具体为：根据离线指标和实时指标的计算规则设计dw层公共维表层，由dw层事实表和公共维度表关联，计算得到数据集市表；

步骤4、将上述步骤3得到的数据集市表载入FineBI，设计前端展示的仪表盘。

2.如权利要求1所述的一种辅助保险类电商运营快速决策工作的方法，其特征在于：所述步骤1中，所述源数据包括网站日志数据、网站客户数据和网站产品数据，所述网站日志数据包含WEB端、WAP端和APP端用户访问日志数据；所述网站客户数据包含会员基础信息和交易数据；所述网站产品数据包含保险产品上架及下架信息；具体步骤如下：

步骤1-1、所述网站日志数据直接接入flog实时日志后，通过流式计算实时数据源统计实时指标，导入Oracle数据库作为离线指标，通过离线计算离线数据源统计离线指标；

步骤1-2、网站客户数据和网站产品数据导入数据库ods层后，ETL存储过程用增量方式抽取数据，并且将kettle的执行调度频次改为5分钟收取一次业务库数据。

3.如权利要求2所述的一种辅助保险类电商运营快速决策工作的方法，其特征在于：所述步骤2中，对ods层数据进行规整化处理，建设dw层的事实表数据仓库模型，具体步骤如下：

步骤2-1、对进入数据库dw层的数据表进行规范化处理，具体为,将网站日志数据的WEB端、WAP端和APP端日志合并为一个日志表dw_xyz_probe_all_agg_d，处理粒度为：每日、平台、会员ID、cookie、是否为活动专题页面、页面名称、产品id、产品名称、险种名称、访问PV、停留时长；对网站日志数据的实时指标，接入flog实时日志，Flink同时消费不止一个topic中的数据，指定每个分区的offset用以确定消费数据的位置,指定Checkpoint的模式用以确定数据的一次性语义,设置Restart的参数用以指定重启策略；

步骤2-2、对于网站客户数据和网站产品数据，将业务表从ods层下沉到dw层，具体为：所述dw层划分出四个业务域：会员注册域，会员登录域，会员交易域和产品属性域，对进入数据库的ods层的数据表，经清洗数据后，下沉dw层。