[发明专利]可配置的数据采集方法

说明书

技术领域：

本发明涉及一种可配置的数据采集方法。

背景技术：

在公司网络运营维护当中，网络中的各种网元都会定时以Telnet协议向网络中发送表示其工作状态的文本形式信息，由于网元间的差异，这些信息的组织方式和内容并不完全一致，在使用传统的数据采集方式时，可能会出现一种网元对应一种数据采集程序，在通迅技术飞速发展的今天，网元的更新换代也在不断加速，由此带来的网元向网络中发送的工作状态信息和组织方式和内容也在不断变化中，使得软件开发人员的工作量不加大，出现了大量的重复工作量。

现有技术：使用INI文件或XML文件作为配置文件的载体，能实现对指定关建字的数据进行采集，但当涉及到计算公式或数据库结构变化时无法适应这些变化导致采集程序无法正常运行或是采集到错误的数据，要修正这些问题需要软件开发人员修改采集程序并重新编译后才能正常工作。

现有技术的缺点：简单的数据与数据库表间的映射关系，当数据库表名/字段变化时需要修改采集程序并重新编译，用户没有办法自行修改；对于由多个数据运算所组成的数据，用户没有办法自行指定参与运算数据和运算方法，只能修改采集程序并重新编译；采集任务单一，当需要新增加采集任务时，需要修改采集程序并重新编译，从而加重了工作人员的工作负担。

发明内容：

本发明的目的在于提供一种可配置的数据采集方法，该方法可实现灵活的数据采集。

为了实现上述目的，本发明采用：

1.使用XML语言作为数据采集的配置语言，  易于用户自行修改。

2.当用户可以自行修改采集的数据与数据保存的数据库表的结构，充分满足用户的不同需求。

3.用户可以自行对采集到的数据进行处理，如取子字符串、数制变换等操作，满足多变的数据采集需求。

4.用户可以自定义计算公式、对采集到的数据进行计算避免了数据库中保存过多的冗余数据，减少了后期生成报表时的运算量。

本发明的优点：通过数据与数据库表间的映射关系，当数据库表名/字段变化时需要修改采集程序并重新编译，可自行修改；对于由多个数据运算所组成的数据，无须修改采集程序和编译；减轻了工作人员的工作负担。

具体实施方式：

本发明选用XML做为配置文件的格式，XML全称EXtensible Markup Language，翻译为可扩展置标语言，可扩展标记语言或可延伸标示语言，是一种置标语言。置标指计算机所能理解的信息符号，通过此种标记，计算机之间可以处理包含各种信息的文章等。

本发明还选用Microsoft.NET Framework做为配置文件解析与采集程序的运行平台

1.配置语言定义：

a)关建字

i.DataConfig

根节点，定义了一个配置的开始

1.Task

Task节点定义了一项采集任务

Variable

Variable节点定义了采集到的数据需要保存到哪个变量中

Var

Var节点定义了变量名与采集到的数据的对应关系。

2.Functions

Functions节点定义了用户自定义函数列表

FunFile

FunFile节点定义了用户自定义函数的文件保存的路径

3.Table

Table节点定义了数据库表的名称、要执行的操作和数据库表中的字段与Variable节点中定义的变量之间的对应关系。

Command

Command节点定义了需要对数据库进行操作的SQL语句。

Field

Field节点定义了字段与Variable节点中定义的变量之间的对应关系，在这里可以使用算术

表达式与自定义函数对数据进行处理。

b)根节点下为采集任务节点，其定义为<Task name＝”Task Name”desc＝”describe”>……</Task>，name属性为采集任务名，desc属性为任务注释，大小写敏感。

c)在Task节点中需要两部分的定义：