[发明专利]用电信息采集系统的任务并行处理方法

摘要

本发明给出了一个用电信息采集系统的任务并行处理方法，建立分布式的采集通讯机组，由各采集通讯机并行采集线程对应的分布在各地市的终端执行采集任务，根据终端的不同类型，对采集的任务进行分解：通过管理线程查询当前采集通讯机组所有采集线程的运行状态，当有空闲的采集线程时，就去取任务队列中需要执行的任务；对各个地市之间的采集任务并行处理；对多个采集线程采集上来的数据项同时进行存储，数据缓存区对于每个线程进行分区，同时读写。本发明通过分布式的并行处理方法，确保不同用户任务数据的及时性，并提高了采集系统的执行效率。

主权项

 用电信息采集系统的任务并行处理方法，其特征在于：包括以下步骤：1)    建立各地市采集任务的分布式的采集通讯机组：建立分布式的采集通讯机组，由各采集通讯机并行采集线程对应的分布在各地市的终端执行采集任务，对各个地市之间的采集任务并行处理；2) 任务的并行处理：当任务队列中有任务需要执行时，通过一个管理线程查询当前采集通讯机组所有采集线程的运行状态，当有空闲的采集线程时，就去取任务队列中这个需要执行的任务，没有采集线程空闲的话，该任务处于等待状态，直至查询到有空间的采集线程； 3)    任务分解成若干子任务：根据终端的不同类型，对采集的任务进行分解： A.终端为集抄终端：循环数据项，由当前数据项和当前采集点取得采集对象列表，循环采集对象列表，取得采集数据项，当采集数据项数达到任务上限或者到达最后一个采集对象，则生成一条子任务；当所有采集对象的子任务生成完成，则转至下一个数据项，由下一个数据项和当前的采集点取得新的采集对象列表，生成下一个数据项和当前采集点的采集任务，过程与前一个数据项的子任务生成过程相同；B.终端为负控终端：先取得该采集点的采集对象列表，循环采集对象列表，由每个采集对象分别和当前配置任务的所有数据项生成采集数据项列表，如果采集数据项数达到每条任务最大采集数据项数，或者到达最后一个采集对象的最后一个采集数据项时，则生成一条子任务；当一个采集对象对应所有数据项的采集数据项的自动任务生成完成，则转至下一个采集对象，下一个采集对象的自动任务生成过程与前一个采集对象生成过程相同；4)    任务的并行存储：对多个采集线程采集上来的数据项同时进行存储，数据缓存区对于每个线程进行分区，同时读写。