[发明专利]数据归集方法、装置、计算机设备和存储介质

说明书

本申请涉及一种数据归集方法、装置、计算机设备和存储介质。方法包括：当获取得到数据归集请求时，响应于数据归集请求，确定数据归集请求的请求参数；请求参数包括时间参数；根据时间参数，确定与数据归集请求相对应的目标归集策略；确定多个数据源中的与目标归集策略相对应的目标数据源，并从目标数据源中筛选出与请求参数相对应的目标归集数据；对目标归集数据进行归集处理，得到数据归集结果。采用本方法能够提高数据归集的准确性。

技术领域

本申请涉及计算机技术领域，特别是涉及一种数据归集方法、装置、计算机设备和存储介质。

背景技术

随着计算机技术的发展，用户多通过线上支付方式进行交易，从而产生多个业务数据，企业在获取到用户的业务数据后，需要进行数据归集处理，也即将业务数据汇总到企业指定账户的过程。

目前，当企业需要对业务数据进行归集处理时，通常直接从数据库中获取预先存储好的数据，再逐一对获取的数据进行归集处理。然而，由于需要预先将业务数据存储在数据库中后才能进行归集处理，而现实交易过程中的业务数据的数量会实时增加，从而造成无法准确归集所有数据的问题。因此，如何对数量实时增加的业务数据进行归集，从而提高数据归集的准确性是本公开需要解决的问题。

发明内容

基于此，有必要针对上述技术问题，提供一种能够提高数据归集的准确性的数据归集方法、装置、计算机设备、计算机可读存储介质和计算机程序产品。

第一方面，本申请提供了一种数据归集方法。所述方法包括：

当获取得到数据归集请求时，响应于所述数据归集请求，确定所述数据归集请求的请求参数；所述请求参数包括时间参数；

根据所述时间参数，确定与所述数据归集请求相对应的目标归集策略；

确定多个数据源中的与所述目标归集策略相对应的目标数据源，并从所述目标数据源中筛选出与所述请求参数相对应的目标归集数据；

对所述目标归集数据进行归集处理，得到数据归集结果。

在其中一个实施例中，所述根据所述时间参数，确定与所述数据归集请求相对应的目标归集策略，包括：获取目标时间段；当所述时间参数包括所述目标时间段时，确定所述目标归集策略为第一归集策略；所述第一归集策略为对所述目标时间段的数据进行动态归集的策略；所述确定多个数据源中的与所述目标归集策略相对应的目标数据源，包括：将预设数据库和动态数据库作为所述第一归集策略对应的目标数据源；所述动态数据库中存储了在分布式集群上动态采集的数据。

在其中一个实施例中，所述根据所述时间参数，确定与所述数据归集请求相对应的目标归集策略，包括：获取目标时间段；当所述时间参数不包括所述目标时间段时，确定所述目标归集策略为第二归集策略；所述第二归集策略为对非目标时间段内的数据进行归集的策略；所述确定多个数据源中的与所述目标归集策略相对应的目标数据源，包括：将预设数据库作为所述第二归集策略对应的目标数据源。

在其中一个实施例中，所述数据归集方法由数据归集组件执行；所述数据归集组件包括配置了所述目标数据源的存储模块；所述存储模块包括至少一个主节点、以及每个所述主节点各自管理的至少一个从节点；所述从所述目标数据源中筛选出与所述请求参数相对应的目标归集数据，包括：当所述目标归集策略为第一归集策略时，获取预先配置的主节点与请求类型之间的目标关联关系；根据所述目标关联关系，从所述存储模块的至少一个主节点中筛选出与所述数据归集请求相对应的目标主节点；根据所述时间参数，从所述目标主节点管理的至少一个从节点中筛选出目标从节点，并从所述目标从节点中读取目标归集数据。