[发明专利]一种数据采集方法、电子设备及存储介质

摘要

本申请涉及大数据技术领域，具体提供了一种数据采集方法、电子设备及存储介质，该方法包括步骤：根据预设的入库时间间隔周期性地采集源数据库中的新增源数据集，新增源数据集包括多个具有采样时间信息的新增源数据；根据入库时间间隔的数量创建对应数量的临时表；根据采样时间信息所在的分布区间和预设的第一并发数量将新增源数据集中的新增源数据分别写入对应的临时表；根据新增源数据集的采集时间生成关于临时表和预先创建的正式表的任务信息；根据任务信息将对应的临时表中的所有新增源数据写入对应的正式表，并在完成写入后，删除任务信息对应的临时表；该方法能够有效地提高数据采集的效率。