[发明专利]数据导入校验方法、系统、装置及计算机可读介质

权利要求书

1.数据导入校验方法，其特征在于包括如下步骤：

S100、配置基本约束和关联约束，所述基本约束用于对单表中字段进行约束，所述关联约束与Es搜索引擎配合，用于基于关联表之间的表结构关系确定所述关联表在Es搜索引擎中的索引关系，并根据索引关系将表数据依序导入Es搜索引擎中；

S200、基于基本约束和管理约束构建数据校验模型，在Es搜索引擎中建立与所述数据校验模型对应的物理索引，并同步生成与所述数据校验模型对应的excel模板文件，所述数据校验模型能够导出excel文件并能够对excel文件保存导入使用，所述excel模板文件用于填写数据并导入对应的数据校验模型；

S300、将数据填写至excel模板文件，得到待检验excel文件，并将待检验excel文件导入对应的数据校验模型进行基本约束和关联约束，将待检验excel文件中符合约束的excel数据保存至Es搜索引擎，将待检验excel文件中不符合约束的excel数据作为失败数据保存并提示检测失败原因；

S400、将保存于Es搜索引擎中的excle数据插入数据库，将失败数据进行excel导出并进行修正，对修正后识失败数据执行步骤S300-步骤S400。

2.根据权利要求1所述的数据导入校验方法，其特征在于所述基本约束包括：

基础约束，所述基础约束用于对单表中单个字段进行约束，用于通过表结构分析，对需要导入的数据表中的字段的基础约束进行提取，包括非空约束、唯一约束、和主键约束；

内容约束，所述内容约束用于设置表中字段的内容格式，包括时间格式、数字格式、和数据范围。

3.根据权利要求1所述的数据导入校验方法，其特征在于基于POI程序通过如下步骤将待校验数据导入所述数据校验模型：

通过excel模板文件与数据校验模型之间的对应关系，为待检验excel文件匹配对应的数据校验模型；

对待校验excel文件的sheet页进行提取，以将待校验excel文件每个表进行单独分sheet页保存；

对excel数据进行分页提取，以保证快速高效的将excel数据导入到对应的数据校验模型中。

4.根据权利要求1-3任一项所述的数据导入校验方法，其特征在于所述数据校验模型的格式包括模型名称、模型标识、模型创建时间、模型描述、基本约束、以及关联约束；

Excel模板文件通过文件名和与其对应的数据校验模型的模型标识进行匹配。

5.数据导入校验系统，包括：

约束配置模块，所述约束配置模块用于配置基本约束和关联约束，所述基本约束用于对单表中字段进行约束，所述关联约束与Es搜索引擎配合，用于基于关联表之间的表结构关系确定所述关联表在Es搜索引擎中的索引关系，并根据索引关系将表数据依序导入Es搜索引擎中；

模型构建模块，所述模型构建模块用于基于基本约束和管理约束构建数据校验模型，在Es搜索引擎中建立与所述数据校验模型对应的物理索引，并同步生成与所述数据校验模型对应的excel模板文件，所述数据校验模型能够导出excel文件并能够对excel文件保存导入使用，所述excel模板文件用于填写数据并导入对应的数据校验模型；

数据校验模块，所述数据校验模块用于将数据填写至excel模板文件，得到待检验excel文件，并将待检验excel文件导入对应的数据校验模型进行基本约束和关联约束，将待检验excel文件中符合约束的excel数据保存至Es搜索引擎，将待检验excel文件中不符合约束的excel数据作为失败数据保存并提示检测失败原因；

数据入库模块，所述数据入库模块用于将保存于Es搜索引擎中的excle数据插入数据库，将失败数据进行excel导出并进行修正，并对修正后识失败数据导入数据校验模块。

6.根据权利要求5所述的数据导入校验系统，其特征在于所述基本约束包括：

基础约束，所述基础约束用于对单表中单个字段进行约束，用于通过表结构分析，对需要导入的数据表中的字段的基础约束进行提取，包括非空约束、唯一约束、和主键约束；

内容约束，所述内容约束用于设置表中字段的内容格式，包括时间格式、数字格式、和数据范围。