[发明专利]数据导入方法、装置、设备及计算机存储介质

说明书

本发明涉及金融科技(Fintech)技术领域，并公开了一种数据导入方法，该方法包括：获取数据仓库中未推送的目标元数据，计算所述目标元数据中每个字段的字段长度；获取所述数据仓库对应的多个推送地址，并根据预设的推送地址与元数据之间的对应关系表确定所述目标元数据对应的目标推送地址，将所述目标元数据发送至所述目标推送地址；根据各所述字段长度对所述目标推送地址接收的所述目标元数据进行分割处理，以获取多个数据库文件，根据各所述数据库文件创建目标表。本发明还公开了一种数据导入装置、设备和一种计算机存储介质。本发明提高了数据导入的智能性和效率。

技术领域

本发明涉及金融科技(Fintech)技术领域，尤其涉及数据导入方法、装置、设备及计算机存储介质。

背景技术

随着计算机技术的发展，越来越多的技术(大数据、分布式、云计算、人工智能等)应用在金融领域，传统金融业正在逐步向金融科技(Fintech)转变，但由于金融行业的安全性、实时性要求，也对数据导入技术提出了更高的要求。目前SAS(应用软件)数据导入只提供指定数据格式的导入功能。并且在进行SAS数据导入时，即从HIVE(数据仓库)将数据导入SAS时，需要用户手工生成dat文件，编写SAS导入程序表中，导致数据导入的效率、智能性较低。因此，如何提高数据导入的智能性、效率成为了目前亟待解决的技术问题。

发明内容

本发明的主要目的在于提出一种数据导入方法、装置、设备及计算机存储介质，旨在解决如何提高数据导入的智能性和效率的技术问题。

为实现上述目的，本发明提供一种数据导入方法，所述数据导入方法包括如下步骤：

获取数据仓库中未推送的目标元数据，计算所述目标元数据中每个字段的字段长度；

获取所述数据仓库对应的多个推送地址，并根据预设的推送地址与元数据之间的对应关系表确定所述目标元数据对应的目标推送地址，将所述目标元数据发送至所述目标推送地址；

根据各所述字段长度对所述目标推送地址接收的所述目标元数据进行分割处理，以获取多个数据库文件，根据各所述数据库文件创建目标表。

可选地，根据各所述数据库文件创建目标表的步骤，包括：

获取所述数据仓库中所述目标元数据对应的原始表，并根据所述原始表确定所述目标推送地址的SAS表；

将各所述数据库文件输入至所述SAS表，以获取目标表。

可选地，将各所述数据库文件输入至所述SAS表，以获取目标表的步骤，包括：

将各所述数据库文件输入至所述SAS表，并获取具有各所述数据库文件的SAS表的SAS表属性信息；

读取所述原始表的原始表属性信息，检测所述原始表属性信息是否和所述SAS表属性信息匹配；

若匹配，则将所述具有各所述数据库文件的SAS表作为目标表。

可选地，检测所述原始表属性信息是否和所述SAS表属性信息匹配的步骤之后，包括：

若所述原始表属性信息和所述SAS表属性信息不匹配，则获取与所述原始表属性信息匹配的历史表，并将所述历史表与所述具有各所述数据库文件的SAS表进行合并，以获取目标表。

可选地，计算所述目标元数据中每个字段的字段长度的步骤，包括：

根据预设的分割符对所述目标元数据进行分割，以获取多个字段；

计算各所述字段在每一行的初始长度，并根据各所述初始长度确定各所述字段的字段长度。

可选地，计算各所述字段在每一行的初始长度，并根据各所述初始长度确定各所述字段的字段长度的步骤，包括：