[发明专利]一种可配置的自动化解析方法和装置

权利要求书

1.一种可配置的自动化解析方法，其特征在于，包括：

将形成数据接入工作流的数据读取步骤、数据解析步骤以及数据写入步骤节点化，形成数据读取节点、数据解析节点以及数据写入节点；

提供包括数据读取节点、数据解析节点以及数据写入节点的配置文件；

根据数据类型从配置文件中选择适配数据类型和需求的数据读取节点、数据解析节点以及数据写入节点的配置参数；

以spark计算引擎为基础，根据选择分别从配置文件中加载数据读取节点、数据解析节点以及数据写入节点的配置参数，并结合数据接入工作流的内在逻辑图参数，实现数据的自动化解析。

2.根据权利要求1所述的可配置的自动化解析方法，其特征在于，在进行数据的自动化解析时，通过Akka Actor消息作为节点的配置参数的加载驱动，依次加载读取节点、解析节点以及写入节点的配置参数，实现数据的自动化解析。

3.根据权利要求2所述的可配置的自动化解析方法，其特征在于，通过Akka Actor消息作为节点的配置参数的加载驱动时，根据当前节点的Akka Actor消息反馈的配置参数情况，驱动加载后续节点的配置参数；

当Akka Actor消息反馈的配置参数情况为成功时，驱动加载后续节点的配置参数；

当Akka Actor消息反馈的配置参数情况为错误时，停止驱动加载后续节点的配置参数。

4.根据权利要求1所述的可配置的自动化解析方法，其特征在于，所述数据读取节点的配置文件包括WebService接口数据接入参数、HTTP接口数据接入参数、DB接口数据接入参数、Kafka数据接入参数、游标数据接入参数、文件接入参数、存储过程数据接入参数。

5.根据权利要求1所述的可配置的自动化解析方法，其特征在于，所述数据解析节点的配置文件包括XML解析工具、JSON解析工具、HL7解析工具以及字段映射解析工具。

6.根据权利要求1所述的可配置的自动化解析方法，其特征在于，所述数据写入节点的配置文件包括Oracle数据库、Csv文件类型、Console数据测试。

7.一种可配置的自动化解析装置，其特征在于，包括：

节点化模块，用于将形成数据接入工作流的数据读取步骤、数据解析步骤以及数据写入步骤节点化，形成数据读取节点、数据解析节点以及数据写入节点；

配置文件模块，用于提供包括数据读取节点、数据解析节点以及数据写入节点的配置文件；

配置模块，根据数据类型从配置文件中选择适配数据类型和需求的数据读取节点、数据解析节点以及数据写入节点的配置参数；

解析模块，用于以spark计算引擎为基础，根据选择分别从配置文件中加载数据读取节点、数据解析节点以及数据写入节点的配置参数，并结合数据接入工作流的内在逻辑图参数，实现数据的自动化解析。

8.根据权利要求7所述的可配置的自动化解析装置，其特征在于，解析模块中，在进行数据的自动化解析时，通过Akka Actor消息作为节点的配置参数的加载驱动，依次加载读取节点、解析节点以及写入节点的配置参数，实现数据的自动化解析。

9.一种可配置的自动化解析装置，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上执行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现以下步骤：

步骤1，根据数据类型从配置文件中选择适配数据类型和需求的数据读取节点、数据解析节点以及数据写入节点的配置参数；

所述配置文件包括数据读取节点、数据解析节点以及数据写入节点的配置参数；

步骤2，根据数据类型从配置文件中选择适配数据类型和需求的数据读取节点、数据解析节点以及数据写入节点的配置参数；

步骤3，以spark计算引擎为基础，根据选择分别从配置文件中加载数据读取节点、数据解析节点以及数据写入节点的配置参数，并结合数据接入工作流的内在逻辑图参数，实现数据的自动化解析。