[发明专利]一种数据导入方法、装置、计算机设备及存储介质

说明书

本发明公开了一种数据导入方法、装置、计算机设备及存储介质。所述方法包括：获取目标数据表的输入信息，输入信息包括查询语句和变量替换信息；从数据库中提取与所述目标数据表对应的数据导入工具模板，数据导入工具模板中变量标识；根据查询语句和变量替换信息对数据导入工具模板中的变量标识进行替换，得到数据同步程序；通过文件传送协议将数据同步程序发送至服务端，以使服务端运行数据同步程序，实现数据的导入。本发明的技术方案可以大大的减少开发人员对Kettle程序手工执行调试，提升了开发人员的工作效率。

技术领域

本发明涉及计算机技术领域，尤其涉及一种数据导入方法、装置、计算机设备及存储介质。

背景技术

Kettle(Kettle E.T.T.L.Environment)是一款开源免费的数据同步工具。大数据分析时需要将业务系统中的相关表同步至大数据集群中，其中同步表中数据，可选的工具就有Kettle。Kettle可以通过图形化拖拉配置的方式就可以简单的开发一个表数据的同步。

但是如果是大量的同步数据表，重复性的工作就会比较多。开发测试的工作量相对较大。导致Kettle工具在处理大量同步数据时，影响开发和测试的效率。

发明内容

本发明实施例提供一种数据导入方法、装置、计算机设备及存储介质，以解决利用Kettle工具处理大量的同步数据表，重复性的工作比较多，开发测试的工作量相对较大的问题。

一种数据导入方法，包括：

获取目标数据表的输入信息，所述输入信息包括查询语句和变量替换信息；

从数据库中提取与所述目标数据表对应的数据导入工具模板，所述数据导入工具工具模板中包括变量标识；

根据所述查询语句和所述变量替换信息对所述数据导入工具工具模板中的变量标识进行替换，得到数据同步程序；

通过文件传送协议将所述数据同步程序发送至服务端，以使所述服务端运行所述数据同步程序，实现数据的导入。

一种数据导入装置，包括：

信息获取模块，用于获取目标数据表的输入信息，所述输入信息包括查询语句和变量替换信息；

模板获取模块，用于从数据库中提取与所述目标数据表对应的数据导入工具模板，所述数据导入工具模板中包括变量标识；

变量替换模块，用于根据所述查询语句和所述变量替换信息对所述数据导入工具模板中的变量标识进行替换，得到数据同步程序；

程序执行模块，用于通过文件传送协议将所述数据同步程序发送至服务端，以使所述服务端运行所述数据同步程序，实现数据的导入。

一种计算机设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述数据导入方法的步骤。

一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现上述数据导入方法的步骤。

上述数据导入方法、装置、计算机设备及存储介质中，通过获取目标数据表的输入信息，输入信息包括查询语句和变量替换信息；从数据库中提取与目标数据表对应的数据导入工具模板，数据导入工具模板中包括变量标识；根据查询语句和变量替换信息对数据导入工具模板中的变量标识进行替换，得到数据同步程序；通过文件传送协议将数据同步程序发送至服务端，以使服务端运行数据同步程序，实现数据的导入。结合Kettle工具，将Kettle工具集合成数据导入工具模板，以数据导入工具模板的形式，得到数据同步程序，达到批量导入数据的目的，增加工作效率。

附图说明