[发明专利]数据加载方法、装置、设备及计算机可读存储介质

权利要求书

1.一种数据加载方法，其特征在于，所述数据加载方法包括以下步骤：

接收上游系统推送的业务数据，并基于预设的数据处理模型将所述业务数据加载至临时表中；

获取映射文档，并基于所述映射文档确定所述业务数据对应的映射关系；

基于所述映射关系，将所述临时表中的业务数据加载至实时表中；

所述接收上游系统推送的业务数据，并基于预设的数据处理模型将所述业务数据加载至临时表中的步骤包括：

通过数据加载工具接收上游系统推送的业务数据，并基于所述业务数据的业务类型将所述业务数据加载至对应的接口表；

获取所述接口表对应的预设的数据处理模型，并基于所述预设的数据处理模型对所述接口表中的业务处理进行处理，以便将处理后的所述业务数据加载至对应的临时表；

所述接收上游系统推送的业务数据，并基于预设的数据处理模型将所述业务数据加载至临时表中的步骤之前，还包括：

制作映射文档，其中，所述映射文档中包括接口区、临时区和实时区，所述接口区、临时区和实时区中记录所述业务数据对应的接口表、临时表和实时表的存储位置字段；

保存所述映射文档；

所述基于所述映射文档确定所述业务数据对应的映射关系的步骤包括：

基于所述映射文档中的临时区和实时区中分别记录的所述存储位置字段，生成所述临时区和实时区对应的映射关系，并确定为所述业务数据对应的映射关系；

所述基于所述映射关系，将所述临时表中的业务数据加载至实时表中的步骤包括：

获取当前时间，并判断所述当前时间是否满足预设时间条件；

若是，则判断所述业务数据是否满足加载条件；

若所述业务数据满足加载条件，则基于所述映射关系将所述业务数据加载至对应的实时表；

其中，所述基于所述映射关系将所述业务数据加载至对应的实时表的步骤包括：

创建若干个并行的数据加载任务，并基于所述业务数据的业务类型将所述业务数据分配至所述数据加载任务中；

启动所述数据加载任务，将所述数据加载任务中的业务数据基于所述映射关系加载至对应的实时表。

2.如权利要求1所述的数据加载方法，其特征在于，所述基于所述映射关系，将所述临时表中的业务数据加载至实时表中的步骤之后，还包括：

获取预设的业务分配规则，并根据所述业务分配规则将所述实时表中的业务数据分配至不同的业务员系统中。

3.如权利要求2所述的数据加载方法，其特征在于，所述基于所述映射关系，将所述临时表中的业务数据加载至实时表中的步骤之后，还包括：

判断业务数据加载是否完成；

若是，则对所述临时表中的业务数据进行备份，并在备份完成后删除所述临时表中的业务数据。