[发明专利]业务数据处理方法、装置、电子设备及存储介质

说明书

本发明实施例公开了一种业务数据处理方法、装置、电子设备及存储介质，该方法包括：基于ETL计算任务从数据库中调取目标待处理数据，并将所述目标待处理数据缓存至临时数据表中；根据预先设置的数据处理条件，将所述临时数据表中各待处理子数据发送至业务处理模块；其中，所述待处理子数据为所述目标待处理数据中的一组数据；基于所述业务处理模块对各待处理子数据进行处理，得到存储至业务数据表中待使用业务数据，以基于所述待使用业务数据进行业务分析处理。本发明实施例的技术方案，解决了现有技术中需要用户手动的从数据库中调取数据存在繁琐复杂，以及周期较长的问题，实现了快速便捷的从数据库中提取数据的技术效果。

技术领域

本发明实施例涉及数据处理技术领域，尤其涉及一种业务数据处理方法、装置、电子设备及存储介质。

背景技术

随着互联网技术的飞速发展以及在大数据的环境下，数据库中存储的业务数据越来越多，在对大量数据进行处理时，现有技术是通过建立CSV文件的形式，并由用户导入相应的数据。

在基于用户导入数据时，由于数据量较大，需要消耗大量人力，以及处理效率较低的问题；同时，由于是人工执行的，那么就会存在人为疏忽，导致遗漏数据的问题。

发明内容

本发明提供一种业务数据处理方法、装置、电子设备及存储介质，以实现对离线业务数据自动处理的技术效果。

第一方面，本发明实施例提供了一种业务数据处理方法，该方法包括：

基于ETL计算任务从数据库中调取目标待处理数据，并将所述目标待处理数据缓存至临时数据表中；

根据预先设置的数据处理条件，将所述临时数据表中各待处理子数据发送至业务处理模块；其中，所述待处理子数据为所述目标待处理数据中的一组数据；

基于所述业务处理模块对各待处理子数据进行处理，得到存储至业务数据表中待使用业务数据，以基于所述待使用业务数据进行业务分析处理。

第二方面，本发明实施例还提供了一种业务数据处理装置，该装置包括：

数据缓存模块，用于基于ETL计算任务从数据库中调取目标待处理数据，并将所述目标待处理数据缓存至临时数据表中；

数据发送模块，用于根据预先设置的数据处理条件，将所述临时数据表中各待处理子数据发送至业务处理模块；其中，所述待处理子数据为所述目标待处理数据中的一组数据；

数据存储模块，用于基于所述业务处理模块对各待处理子数据进行处理，得到存储至业务数据表中待使用业务数据，以基于所述待使用业务数据进行业务分析处理。

第三方面，本发明实施例还提供了一种电子设备，所述电子设备包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如本发明实施例任一所述的业务数据的处理方法。第四方面，本发明实施例还提供了一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行如本发明实施例任一所述的业务数据处理方法。

本实施例的技术方案，通过基于ETL计算任务从数据库中调取目标待处理数据，并将所述目标待处理数据缓存至临时数据表中；根据预先设置的数据处理条件，将所述临时数据表中各待处理子数据发送至业务处理模块；其中，所述待处理子数据为所述目标待处理数据中的一组数据；基于所述业务处理模块对各待处理子数据进行处理，得到存储至业务数据表中待使用业务数据，以基于所述待使用业务数据进行业务分析处理，解决了现有技术中需要人工将数据导入至业务处理模块，存在人力成本较高以及效率较低的问题，实现了自动对待处理业务数据进行导入，以便后续分析处理，提高了数据导入便捷性和自动性技术效果。

附图说明