[发明专利]一种通用数据入库装置及方法

说明书

技术领域

本发明涉及数据库领域，具体涉及一种通用数据入库装置及方法。

背景技术

在安全信息管理系统中(SIMS：Security Information Manage System)，常常需要把采集到的安全信息在第三方厂商的软硬件环境下展现，在实现上表现为把第三方厂商感兴趣的数据入到特定的表中。不同厂商关注的数据千变万化，其自定义的数据库存储结构也是格式多样的，这样就存在一个问题，怎么样才能使安全信息管理系统(SIMS：Security Information Manage System)中的数据方便的转换到第三方数据库中。

目前来说，最通用的做法就是针对不同的第三方厂商的应用，做不同的数据入库模块，这样的直接后果就是代码冗余，管理维护成本太高。

发明内容

本发明要解决的技术问题是提供一种通用的数据入库装置及方法，无缝地解决了安全信息管理系统数据入第三方库的问题。

为了解决上述问题，本发明提供了一种通用数据入库方法，包括：根据数据流类型及数据库生成配置文件；根据配置文件建立数据库连接，并建立数据流对应数据结构和数据库中数据表结构的映射关系；之后将接收的数据流写入所述数据库。

进一步地，所述生成的配置文件包括数据流描述、数据库表结构描述、数据库类型、数据库地址、数据库名称及密码。

进一步地，所述建立数据库连接是指，先根据所述配置文件确定数据库类型、数据库地址、数据库名称及密码，之后根据上述值建立数据库连接。

进一步地，所述根据配置文件的数据流描述，建立数据流对应数据结构和数据库中数据表结构的映射是指，根据配置文件中包含的字段及字段类型，确定这些字段在内存中的线性序列，以及根据配置文件中数据库表结构的描述语句，确定数据库表结构，之后建立入库命令中参数序列和数据结构中各字段的映射关系。

进一步地，所述将接收的数据流写入所述数据库是指，收到数据流后，提取与数据流描述中对应的字段值，利用入库命令将所述字段值插入所述数据库中。

本发明还提供一种通用数据入库装置，所述装置包括：配置文件生成模块、映射模块、存储模块和数据流接收及写入模式；

所述配置文件生成模块用于根据数据流的类型及数据库生成配置文件；

所述映射模块用于读取生成的配置文件，建立数据库连接及建立数据流对应数据结构和数据库中数据表结构的映射；

所述存储模块用于接收并存储入库命令以及入库命令中参数序列与数据流字段的映射关系；

所述数据流接收及写入模块用于将接收的数据流写入所述数据库。

进一步地，所述生成的配置文件包括数据流描述、数据库表结构描述、数据库类型、数据库地址、数据库名称及密码。

进一步地，所述映射模块建立数据库连接是指，映射模块根据所述配置文件确定数据库类型、数据库地址、数据库名称及密码，并根据上述值建立数据库连接。

进一步地，所述映射模块建立数据流对应数据结构和数据库中数据表结构的映射是指，映射模块根据配置文件中包含的字段及字段类型，确定这些字段在内存中的线性序列，以及根据配置文件中数据库表结构的描述语句，确定数据库表结构，之后建立入库命令中参数序列和数据结构中各字段的映射关系。

进一步地，所述流接收及写入模块将接收的数据流写入所述数据库是指，流接收及写入模块接收数据流，提取与数据流描述中对应的字段值，利用入库命令将所述字段值插入所述数据库中。

综上所述，本发明提供一种通用的数据入库装置及方法，可以解决不同数据结构对应不同数据数据库表结构的映射和入库过程，无缝地解决了安全信息管理系统数据入第三方库的问题，以及其他领域通用数据入库的问题。同时，本发明具有灵活，实现简单，占用资源少，效率高的特征。

附图说明

图1为本发明装置结构示意图；

图2为本发明方法流程图。

具体实施方式

针对现有技术的不足，本发明提供一种通用的数据入库装置及方法，通过配置文件把数据结构内容和安全信息管理系统所采集的数据进行关联和映射，使安全信息管理系统所采集的数据可以无缝的传输到第三方应用的自定义数据表中。

本发明提供一种通用数据入库装置，如图1所示，包括配置文件生成模块、映射模块、存储模块和数据流接收及写入模式；

配置文件生成模块用于根据数据流的类型及数据库生成配置文件，配置文件包括数据流描述、数据库表结构描述、数据库类型、数据库地址、数据库名称及密码等信息；