[发明专利]一种基于可配置参数的大数据SQL程序设计方法

说明书

本发明公开了一种基于可配置参数的大数据SQL程序设计方法，具体过程为：S1、在参数管理中创建参数，根据参数类型来进行配置参数对应的参数值内容；S2、SQL开发时，在系统开发平台填写SQL语句，支持HIVE、SPARKSQL、IMPALA，SQL语句填写中可引用步骤S1中创建的参数；S3、通过获取SQL语句，解析、校验、转换SQL语句；S4、根据步骤S3转换得到的SQL语句，通过JDBC方式连接HIVE或IMPALA进行执行。本发明通过预先配置各种参数，使得在SQL程序开发时可以直接引用相关参数，从而形成一套配置化、标准版和统一化的体系，实现来简化开发。

技术领域

本发明涉及SQL程序开发技术领域，具体涉及一种基于可配置参数的大数据SQL程序设计方法。

背景技术

目前现有大数据产品在执行SQL的过程中，只会对SQL语句进行格式化和校验，最终把SQL语句发送给执行引擎来计算结果。另外，在技术产品的使用过程中，使用者针对重复的参数和变量，需要繁琐、重复去填写，从而带来了不必要的工作量，并且要检查值是否正确。

发明内容

针对现有技术的不足，本发明旨在提供一种基于可配置参数的大数据SQL程序设计方法。

为了实现上述目的，本发明采用如下技术方案：

一种基于可配置参数的大数据SQL程序设计方法，具体过程为：

S1、在参数管理中创建参数，根据参数类型来进行配置参数对应的参数值内容；

S2、SQL开发时，在系统开发平台填写SQL语句，支持HIVE、SPARKSQL、IMPALA，SQL语句填写中可引用步骤S1中创建的参数；

S3、通过获取SQL语句，解析、校验、转换SQL语句；

S4、根据步骤S3转换得到的SQL语句，通过JDBC方式连接HIVE或IMPALA进行执行。

进一步地，步骤S1的具体过程为：

所述参数包括如下字段：参数名、参数类型、参数内容、对应数据源、备注；其中所述参数类型包括普通参数、SQL脚本参数或HTTP地址参数；

针对不同类型的参数有不同解析和配置规则：

(1)普通参数：普通参数包含系统内置的参数、根据参数计算出来的参数以及常量；对于普通参数，配置参数名称、参数类型、参数内容和备注；

(2)SQL脚本参数：对于SQL脚本参数，配置参数名称、参数类型、参数内容、数据源和备注，其中，参数内容为sql脚本，sql脚本可以引用其他类型的参数；

(3)HTTP地址参数：对于HTTP地址参数，配置参数名称、参数类型、参数内容和备注；HTTP地址参数支持通过url动态获取参数值，支持url中引用其他参数。

本发明的有益效果在于：本发明通过预先配置各种参数，使得在SQL程序开发时可以直接引用相关参数，从而形成一套配置化、标准版和统一化的体系，实现来简化开发。

附图说明

图1为本发明实施例的方法流程示意图。

具体实施方式

以下将结合附图对本发明作进一步的描述，需要说明的是，本实施例以本技术方案为前提，给出了详细的实施方式和具体的操作过程，但本发明的保护范围并不限于本实施例。

本实施例提供一种基于可配置参数的大数据SQL程序设计方法，如图1所示，具体过程为：

S1、在参数管理中创建参数，根据参数类型来进行配置参数对应的参数值内容。