[发明专利]一种多专业、大容量实时数据采集方法

权利要求书

1.一种多专业、大容量实时数据采集方法，其特征在于：将大型SCADA系统的数据采集子系统功能部署在N台IO服务器上，N为大于1的自然数，采用1主(N-1)热备冗余模式，组成数据采集服务器集群，综合考虑各个数据采集任务的约束条件和服务器状态，动态调整任务在各服务器上运行的优先级，将其分配到优先级最高的服务器上并行运行；通讯协议采用软插件形式实例化成“车间流水线”上的“工人”，各条“流水线”采用多线程和多进程相结合方式并行，提高数据的吞吐能力和通讯可靠性。

2.如权利要求1所述的一种多专业、大容量实时数据采集方法，其特征在于：所述数据采集服务器集群的工作方式是：数据采集应用在集群中各IO服务器上同时部署，一台IO服务器值班，其余的IO服务器备用；IO服务器之间通过网络心跳报文来实时监测彼此的状态，网络心跳报文正常采用UPD方式发送，在出现异常时，采用TCP方式发送；每台IO服务器上都有一个系统信息库，实时保存集群中个节点的状态和参数；一台IO服务器故障时，在其上面运行的所有任务都会被自动分配到其它服务器上。

3.如权利要求2所述的一种多专业、大容量实时数据采集方法，其特征在于：根据以下调度策略分配IO服务器的数据采集任务；根据数据采集任务在IO服务器上的初始优先级，结合该任务在该IO服务器上中断的次数和时间，以及当前的运行状态，自动调节任务在该IO服务器上的优先级，并根据优先级决定任务部署在哪个IO服务器。

4.如权利要求2所述的一种多专业、大容量实时数据采集方法，其特征在于：所述数据采集服务器集群中的每一路数据通讯均定义其所属进程编号，进程启动后，自动创建单独的线程来实现数据通讯；相同进程编号的数据通讯任务在同一个进程中、不同的线程独立运行。

5.如权利要求4所述的一种多专业、大容量实时数据采集方法，其特征在于：所述数据采集服务器集群中的每一路数据通讯的协议都是采用软插件方式，即每一个通讯协议都以动态库插件形式存在，在数据通讯任务启动时，自动将软插件实例化，从而开始处理各种数据。

6.如权利要求5所述的一种多专业、大容量实时数据采集方法，其特征在于：所述数据采集服务器集群中的数据通讯采用“车间流水线”模式，“流水线”上的“工人”为具有各种协议处理能力的功能插件，当通讯开始时，每个插件实例化，形成流水线上的“工人”；“工人”处理报文有先后顺序，依照工序处理报文。