[发明专利]支持分布式多文件导入的系统及方法

摘要

本发明公开了一种支持分布式多文件导入的系统及方法，系统包括服务层、业务处理层以及数据库，所述服务层，为用户体现了服务的接口；所述业务处理层，对业务数据进行处理；所述数据库，记录导入服务的一些基础数据，并保存文件的临时数据，文件数据读取出来后都保存在数据库中，后续的数据验证，导入都直接操作数据库数据；本发明的方法的支持对文件的传输，数据读取、数据验证、数据结构化、数据传输、文件保存。以满足对文件数据的识别、导入，而且该服务是独立的，不会对系统的客户端或服务端造成任何的影响。

主权项

一种支持分布式多文件导入的系统，其特征在于，包括服务层、业务处理层以及数据库，所述服务层，为用户体现了服务的接口；所述业务处理层，对业务数据进行处理；所述数据库，记录导入服务的一些基础数据，并保存文件的临时数据，文件数据读取出来后都保存在数据库中，后续的数据验证，导入都直接操作数据库数据；所述服务层包括文件保存服务模块、数据读取与验证请求模块、以及目标数据传输模块；所述文件保存服务模块，用于提供给用户上传文件的服务，可单独使用该服务，也可以作为文件服务器，用作保存文件；所述数据读取与验证请求模块，用于用户在完成文件上传后，调用该请求把文件数据读取出来并批量插入到数据库中，并执行验证存储过程以进行数据验证；所述目标数据传输模块，用于在执行完成数据插入后，读取数据并对数据进行结构化整理，并将数据返回给用户；所述业务处理层包括文件读取组件、消息队列组件、数据验证组件、以及数据库操作组件；所述文件读取组件，用于对多种格式的文档进行读取，并保证读取的组件可扩展；所述消息队列组件，用于根据服务所分配的资源，对服务的使用做限制，同时对并发数根据服务器资源进行配置，当并发数量大于配置数时，服务的请求将进入消息队列，只有之前请求的服务完成文件读取，并释放资源后，请求从消息队列调出并执行请求；所述数据验证组件，用作对数据的验证，数据验证的方法由存储过程实现，而存储过程与数据类别验证的映射关系会保存在数据表中，该组件的最大作用就是处理存储过程与数据类别验证的映射关系，并执行存续过程进行数据验证；所述数据库操作组件，是对数据库访问、操作的类，该服务中所有对数据库的操作最终都会应用该组件进行实现，包括执行数据验证的存储过程。