[发明专利]一种支持多种文件类型的数据采集方法

权利要求书

1、一种支持多种文件类型的数据采集方法，其特征在于包括下列内容：

1)数据库服务器信息定义，定义要取数据的数据库服务器信息；

2)数据源定义，定义每种数据来源，包括文件名称，文件存放路径，以读数据库服务器方式，要有对应数据库服务器的编号、读入到系统中实表名、实表名称字段的信息，同时定义表单结构，表单结构，包括字段名称、类型、长度、主外键信息；

3)内外数据表关系定义，定义外部数据表结构与读入的系统数据表结构的关系，包括：

(1)外部数据源和系统表不是一一对应关系的；

(2)对外部数据源需要做某些处理再存入系统表中的；

4)数据采集，通过定义数据源类型，利用连接对象，通过定义表结构及关系定义，将数据源读入到系统表中。

2、根据权利要求1所述的数据采集方法，其特征在于为后台数据库数据的读入定义数据库服务器的相关信息包括：数据库服务器名称、数据库实例名称、属主、用户密码、DBLINK名称和数据库信息编号，通过定义上述信息连接数据源所在的数据库，为采集数据做准备：

3、根据权利要求2所述的数据采集方法，其特征在于定义所需采集的数据表信息包括：

(1)以数据库方式，要选择在数据库服务器定义功能中定义的数据库信息编号；

(2)以外部文件类型，需要定义文件类型、文件名称、存放路径、读入系统中的实表名称、实表日期列和取数SQL；

(3)同时定义要读入的数据源结构信息，包括字段名称，字段类型，字段长度、精度，主外键信息。

4、根据权利要求2所述的数据采集方法，其特征在于以后台数据库采集方式和外部文件取数方式，都需要通过定义的数据库信息连接后台数据库或者外部文件类型定义的数据源信息，组织成一个包含不同数据库引擎的连接字符串，通过传递这个连接字符串，建立通用数据访问的OLEDB与外部数据源建立连接，能使用户的应用程序找到并读出任意类型的数据存储；获取到定义的外部数据表结构，在需要采集数据的系统内，创建一个具有相同类型的临时表，执行取数SQL，将原始数据读入到临时表中，然后再通过定义的外部表与系统表关系，通过数据整理，再将临时表中的数据转入系统表，从而实现系统所需数据源的采集。

5、根据权利要求2所述的数据采集方法，其特征在于定义外部数据源与系统表之间的关系，通过自定义函数方式，将数据进行转换。

6、根据权利要求1所述的数据采集方法，其特征在于对于数据库方式读入，支持MSS SQLServer、ORACLE和SYBASE大型数据库，也支持外部DBF、TXT和EXCEL文件方式，。