[发明专利]数据归集方法、装置、计算机设备和存储介质

权利要求书

1.一种数据归集方法，其特征在于，所述方法包括：

当获取得到数据归集请求时，响应于所述数据归集请求，确定所述数据归集请求的请求参数；所述请求参数包括时间参数；

根据所述时间参数，确定与所述数据归集请求相对应的目标归集策略；

确定多个数据源中的与所述目标归集策略相对应的目标数据源，并从所述目标数据源中筛选出与所述请求参数相对应的目标归集数据；

对所述目标归集数据进行归集处理，得到数据归集结果；

其中，所述根据所述时间参数，确定与所述数据归集请求相对应的目标归集策略，包括：

获取目标时间段；

当所述时间参数包括所述目标时间段时，确定所述目标归集策略为第一归集策略；所述第一归集策略为对所述目标时间段的数据进行动态归集的策略；

所述确定多个数据源中的与所述目标归集策略相对应的目标数据源，包括：

将预设数据库和动态数据库作为所述第一归集策略对应的目标数据源；所述动态数据库中存储了在分布式集群上动态采集的数据。

2.根据权利要求1所述的方法，其特征在于，所述目标时间段为用户预先设置的时间段。

3.根据权利要求1所述的方法，其特征在于，所述根据所述时间参数，确定与所述数据归集请求相对应的目标归集策略，包括：

获取目标时间段；

当所述时间参数不包括所述目标时间段时，确定所述目标归集策略为第二归集策略；所述第二归集策略为对非目标时间段内的数据进行归集的策略；

所述确定多个数据源中的与所述目标归集策略相对应的目标数据源，包括：

将预设数据库作为所述第二归集策略对应的目标数据源。

4.根据权利要求1所述的方法，其特征在于，所述数据归集方法由数据归集组件执行；所述数据归集组件包括配置了动态数据库的存储模块；所述存储模块包括至少一个主节点、以及每个所述主节点各自管理的至少一个从节点；所述从所述目标数据源中筛选出与所述请求参数相对应的目标归集数据，包括：

当所述目标归集策略为第一归集策略时，获取预先配置的主节点与请求类型之间的目标关联关系；

根据所述目标关联关系，从所述存储模块的至少一个主节点中筛选出与所述数据归集请求相对应的目标主节点；

根据所述时间参数，从所述目标主节点管理的至少一个从节点中筛选出目标从节点，并从所述目标从节点中读取目标归集数据。

5.根据权利要求1所述的方法，其特征在于，所述数据归集方法由数据归集组件执行；所述数据归集组件包括计算模块和预设数据库；所述预设数据库包括归集数据表；所述对所述目标归集数据进行归集处理，得到数据归集结果，包括：

根据所述请求参数的请求类型对所述计算模块进行触发，并从代码文件集中筛选出执行所述归集处理时所需的目标代码文件；

对所述预设数据库中的归集数据表进行初始化，得到临时数据表；

将所述目标归集数据填充至所述临时数据表中，得到目标数据表；

运行所述目标代码文件所指示的代码，以对所述目标数据表进行归集处理，得到数据归集结果。

6.根据权利要求1所述的方法，其特征在于，所述目标归集数据包括账户标识和至少一个项目类别字段；所述项目类别字段包括字段数据；所述对所述目标归集数据进行归集处理，得到数据归集结果，包括：

确定各所述目标归集数据各自对应的账户标识和至少一个项目类别字段；

根据所述账户标识对所述目标归集数据进行分组，得到至少一组目标归集数据集；所述目标归集数据集包含至少一个目标归集数据；

对于多组目标归集数据集中的每组目标归集数据集，均将当前目标归集数据集中带有相同项目类别字段的字段数据分别进行叠加，得到当前目标归集数据集对应的归集子结果；

综合各目标归集数据集各自对应的归集子结果，得到数据归集结果。