[发明专利]一种多CSV文件的合并和校验的方法及系统

权利要求书

1.一种多CSV文件的合并和校验的方法，其特征在于，该方法包括以下步骤：

S10，对待校验的CSV文件的表单数进行识别，根据识别结果及检查请求创建对应的检查配置，并生成配置文件；

S20，将多个CSV文件根据所述检查配置进行转换合并处理，生成单个CSV文件；

S30，用于对所述S20得到的单个CSV根据检查配置调用检查接口进行检查，生成检查报告。

2.根据权利要求1所述的多CSV文件的合并和校验的方法，其特征在于，所述步骤S10具体包括：

对接入进行检查的CSV文件数进行识别，若为单个CSV文件则直接调用检查接口进行文件检查；若为多个CSV文件，则根据多个CSV的检查请求创建对应的检查配置。

3.根据权利要求2所述的多CSV文件的合并和校验的方法，其特征在于，该方法还包括对执行检查后多个CSV文件的关联合并后的单表的多规则校验，以及，对单个CSV文件的单表进行联合多规则校验，其中多规则校验和联合多规则校验可自定义设置。

4.根据权利要求2所述的多CSV文件的合并和校验的方法，其特征在于，所述检查接口为GoodTables。

5.根据权利要求1所述的多CSV文件的合并和校验的方法，其特征在于，所述配置文件具体包括对多个需要检查的文件的指定路径、编码、标题行、分隔符、多表关联条件字段及输出字段进行自定义配置。

6.根据权利要求1所述的多CSV文件的合并和校验的方法，其特征在于，所述步骤S20对多个CSV文件的转换合并处理具体包括：

S21，读取配置文件，根据配置文件获取并加载待校验的多个CSV文件；

S22，对多个CSV文件分别执行转换为UTF-8格式、转换分隔符及增加行号的处理；

S23，将进行转换的CSV文件进行关联合并，生成单个CSV文件，并记录合并前多个CSV文件的表的列号；

S24，删除无用表行。

7.根据权利要求6所述的多CSV文件的合并和校验的方法，其特征在于，所述步骤S23具体包括：

根据请求对多个CSV文件对应的多表SQL语句进行拼接处理，进一步生成拼接后的单表，并对单表规则校验。

8.根据权利要求1所述的多CSV文件的合并和校验的方法，其特征在于，所述步骤S30具体包括：

将校验后一条或多条校验失败的表单记录进行显示，进一步，显示对应的行号和列号。

9.一种多CSV文件的合并和校验的系统，用于执行权力要求1-8任一个所述方法，其特征在于：

配置模块，用于对待校验的CSV文件的表单数进行识别，根据识别结果及检查请求创建对应的检查配置，并生成配置文件；

转换模块，用于将多个CSV文件根据所述检查配置进行转换合并处理，生成单个CSV文件；

报告模块，用于对所述转换模块生成的单个CSV文件根据检查配置调用检查接口进行检查，生成检查报告。