[发明专利]数据采集方法以及装置

说明书

本说明书实施例提供数据采集方法以及装置，其中所述数据采集方法包括：在监测到达预设时间节点的情况下，根据所述预设时间节点对应的采集日期，在采集配置列表中筛选出至少一条采集配置项；通过基于所述采集配置项生成的采集任务，对所述采集配置项对应的采集项的业务数据进行采集；在采集成功的情况下，根据所述采集项对应的所述采集频度，确定针对所述采集项的下一采集日期；基于所述下一采集日期，对所述采集项对应的采集配置项中的所述采集日期进行更新，本方案可以应用于监管或者合规领域。

技术领域

本说明书实施例涉及合规数据管理领域，特别涉及数据采集方法以及装置。

背景技术

随着互联网的发展，线上业务越来越多元化，也越来越复杂化，针对业务的业务数据也越来越多样化，而不同的业务数据，对采集的要求也不同，目前针对大量不同的业务数据的采集缺乏规范性，因此需要提供更可靠的方案。

发明内容

有鉴于此，本说明书实施例提供了一种数据采集方法。本说明书一个或者多个实施例同时涉及一种数据采集装置，一种计算设备，以及一种计算机可读存储介质，以解决现有技术中存在的技术缺陷。

本说明书实施例的第一方面，提供了一种数据采集方法，包括：

在监测到达预设时间节点的情况下，根据所述预设时间节点对应的采集日期，在采集配置列表中筛选出至少一条采集配置项；

通过基于所述采集配置项生成的采集任务，对所述采集配置项对应的采集项的业务数据进行采集；

在采集成功的情况下，根据所述采集项对应的所述采集频度，确定针对所述采集项的下一采集日期；

基于所述下一采集日期，对所述采集项对应的采集配置项中的所述采集日期进行更新。

可选的，所述数据采集方法，还包括：

接收针对目标采集项的采集申请，其中，所述采集申请携带所述采集申请的申请时间、所述目标采集项的对应的目标采集频度以及目标采集时效；

基于所述申请时间、所述采集频度以及所述目标采集时效，确定针对所述目标采集项的第一采集日期；

根据所述第一采集日期、所述目标采集频度以及所述目标采集时效，生成所述目标采集项对应的目标采集配置项；

将所述目标采集配置项添加至所述采集配置列表。

可选的，所述基于所述申请时间、所述采集频度以及所述目标采集时效，确定针对所述目标采集项的第一采集日期，包括：

基于所述采集申请的申请时间、所述目标采集频度以及所述目标采集时效，确定针对所述目标采集项的第一目标采集业务时间；

根据所述第一目标采集业务时间以及所述目标采集时效，确定所述第一采集日期。

可选的，所述根据所述第一目标采集业务时间以及所述目标采集时效，确定所述第一采集日期步骤执行之前，还包括：

调用所述目标采集项对应的目标采集任务，对所述目标采集项的目标业务数据进行采集，其中，所述目标业务数据的第二目标采集业务时间基于所述采集申请的申请时间、所述目标采集频度以及所述目标采集时效进行确定。

可选的，所述对所述采集配置项对应的采集项的业务数据进行采集步骤执行之前，还包括：

将生成的所述采集任务添加至采集任务列表，并将所述采集任务的任务状态置为初始状态；

相应的，所述对所述采集配置项对应的采集项的业务数据进行采集，包括：

按照预设时间间隔，在所述采集任务列表中选取预设数量的采集任务，其中，选取的采集任务的任务状态为初始状态；