[发明专利]一种数据导入方法、数据导出方法、装置及数据处理系统

说明书

本发明公开了一种数据导入方法，包括：对导入目标文件进行元数据配置信息；获取导入目标文件的元数据配置信息并进行解析，得到导入解析配置数据；通过适配的数据处理器并根据导入解析配置数据对导入目标文件进行解析处理，得到解析处理文件数据；获取解析处理文件数据并对解析处理文件数据进行业务处理，得到导入结果数据；本发明还公开了一种数据导出方法，包括：对导出目标文件进行元数据配置信息；获取导出目标文件的元数据配置信息并进行解析，得到导出解析配置数据；获取导出解析配置数据并对导出解析配置数据进行业务处理，得到业务处理数据集；通过适配的数据处理器并根据业务处理数据集对导出目标文件进行解析处理，得到导出结果数据。

技术领域

本发明涉及数据处理技术领域，尤其涉及一种数据导入方法、数据导出方法、装置及数据处理系统。

背景技术

导入导出技术，支持通过excel文件导入到数据库中，以及从数据库中导出为excel文件，并通过数据库语言来对数据进行处理。现有的导入导出技术应用于企业应用软件领域，但由于企业的业务复杂多变，其业务数据来源广、处理复杂，在进行数据的导入与导出处理时，处理的过程也更为复杂。在基于元数据驱动的企业应用中，现有的导入导出技术对公有的业务属性进行抽象，从而能够支持复杂多变的业务场景；而在基于领域驱动的企业应用中，现有的导入导出技术基于领域模型进行建模。在多租户平台服务中，通过导入导出技术为不同租户提供平台服务，通过租户隔离、租户资源进行管控来保护平台服务。

但是现有的数据导入导出技术在数据处理的过程中，仅关注数据本身，对数据的处理逻辑未涉及业务方面，以使技术支持的数据来源单一，导致数据量大时会导致系统奔溃等。由于企业应用的场景复杂多变，数据来源多，现有的技术已难以支持。

发明内容

本发明提供了一种数据导入方法、数据导出方法、装置及数据处理系统，通过对导入/导出目标文件进行元数据配置，并结合适配的数据处理器对文件进行解析处理，以解决现有的数据导入导出技术数据来源单一而无法应用于场景复杂多变的企业应用的技术问题，从而在进行数据导入导出时，将数据的处理逻辑独立出来，并适配相应的数据处理器，进而实现对复杂多变的数据进行处理，以防止系统奔溃。

为了解决上述技术问题，本发明实施例提供了一种数据导入方法，包括：

对导入目标文件进行元数据配置信息；

获取导入目标文件的元数据配置信息并进行解析，得到导入解析配置数据；

通过适配的数据处理器并根据所述导入解析配置数据对所述导入目标文件进行解析处理，得到解析处理文件数据；

获取所述解析处理文件数据并对所述解析处理文件数据进行业务处理，得到导入结果数据。

作为优选方案，所述对导入目标文件进行元数据配置信息，包括：

对导入目标文件配置字段间的映射关系；

对导入目标文件配置数据处理信息；

对导入目标文件配置待导入文件信息。

作为优选方案，所述获取导入目标文件的元数据配置信息并进行解析，包括：

获取所述导入目标文件的元数据配置信息；

解析处理所述元数据配置信息中的字段间的映射关系；

解析处理所述元数据配置信息中的数据处理信息；

解析处理所述元数据配置信息中的待导入文件信息。

作为优选方案，所述通过适配的数据处理器并根据所述导入解析配置数据对所述导入目标文件进行解析处理，得到解析处理文件数据，包括：