[发明专利]一种数据处理方法、装置及系统在审
申请号: | 201611248259.3 | 申请日: | 2016-12-29 |
公开(公告)号: | CN106649140A | 公开(公告)日: | 2017-05-10 |
发明(设计)人: | 王刚 | 申请(专利权)人: | 深圳前海弘稼科技有限公司 |
主分类号: | G06F12/0811 | 分类号: | G06F12/0811;G06F12/0842;G06F9/38 |
代理公司: | 北京集佳知识产权代理有限公司11227 | 代理人: | 罗满 |
地址: | 518052 广东省深圳市*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据处理 方法 装置 系统 | ||
1.一种数据处理方法,其特征在于,包括:
缓存队列将各采集设备采集到的采集数据缓存,并在缓存量超过预定数量时,将已缓存的采集数据按照预定规则释放至各数据处理单元;
各数据处理单元接收释放的采集数据,分别启动各自的数据处理线程进行数据处理以得到数据处理结果。
2.根据权利要求1所述的数据处理方法,其特征在于,所述各数据处理单元接收释放的采集数据,分别启动各自的数据处理线程进行数据处理以得到数据处理结果具体包括:
实时接收释放的采集数据,并二次缓存;
判断是否到达各自的释放时间;
如果是,则将二次缓存的采集数据全部释放,并启动各自的数据处理线程进行数据处理以得到数据处理结果;
如果否,则继续判断是否到达各自的释放时间。
3.根据权利要求2所述的数据处理方法,其特征在于,各所述数据处理单元中的数据处理线程为多个。
4.根据权利要求1所述的数据处理方法,其特征在于,所述将已缓存的采集数据按照预定规则释放至各数据处理单元具体为:按照先进先出、进一出一的原则释放已缓存的采集数据,按照各所述数据处理单元当前的处理状态分配已缓存的采集数据。
5.根据权利要求4所述的数据处理方法,其特征在于,所述按照各所述数据处理单元当前的处理状态分配已缓存的采集数据具体为:如果有空闲的数据处理单元,则将已缓存的采集数据分配给空闲的数据处理单元,否则,随机分配。
6.根据权利要求1所述的数据处理方法,其特征在于,还包括:各所述数据处理单元将所述数据处理结果发送给监控服务器。
7.根据权利要求1所述的数据处理方法,其特征在于,还包括:当所述数据处理结果出现异常时对应的数据处理单元输出报警提示信息,其中所述采集数据中包含有采集设备的身份信息,所述报警提示信息包含对应的采集设备的身份信息。
8.根据权利要求1所述的数据处理方法,其特征在于,还包括:存储单元存储各所述数据处理单元的数据处理结果。
9.一种数据处理装置,其特征在于,包括:
缓存队列,用于将各采集设备采集到的采集数据缓存,并在缓存量超过预定数量时,将已缓存的采集数据按照预定规则释放至各数据处理单元;
多个数据处理单元,各数据处理单元用于接收释放的采集数据,分别启动各自的数据处理线程进行数据处理以得到数据处理结果。
10.根据权利要求9所述的数据处理装置,其特征在于,各所述数据处理单元具体包括:
时间缓存流模块,用于实时接收释放的采集数据,并二次缓存;判断是否到达释放时间;如果是,则将二次缓存的采集数据全部释放;如果否,则继续判断是否到达释放时间;
流处理模块,用于启动自身的数据处理线程进行数据处理以得到数据处理结果。
11.一种数据处理系统,包括各采集设备,监控服务器,其特征在于,还包括权利要求9或10所述的数据处理装置。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳前海弘稼科技有限公司,未经深圳前海弘稼科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201611248259.3/1.html,转载请声明来源钻瓜专利网。