[发明专利]一种多数据源环境下数据缺失自动检查及集中监控方法有效
申请号: | 201510270085.X | 申请日: | 2015-05-24 |
公开(公告)号: | CN104850635B | 公开(公告)日: | 2019-02-22 |
发明(设计)人: | 毕晓亮;张亮;徐尧强;岑维新;吴超;李丽;周瑾;郭华军;马欢;周晓苏 | 申请(专利权)人: | 华东电网有限公司;上海欣同创科技有限公司 |
主分类号: | G06F16/23 | 分类号: | G06F16/23;G06F16/25 |
代理公司: | 上海思微知识产权代理事务所(普通合伙) 31237 | 代理人: | 李时云 |
地址: | 200120 上*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 多数 环境 数据 缺失 自动 检查 集中 监控 方法 | ||
1.一种多数据源环境下数据缺失自动检查及集中监控方法,其特征在于包括:
第一步骤:执行定时查缺处理,其中通过程序对多套数据中心接入的调度自动化系统的实时数据表进行定时扫描,以查找丢点数据并将丢点数据保存起来;
第二步骤:执行数据汇总处理,其中在得到多套数据中心的各自的丢点数据后,将不同数据中心的丢点数据汇总到一起以形成总丢点文件;
第三步骤:执行集中监控处理,其中使用报表工具将总丢点文件展示出来;
其中,在所述第一步骤中,首先根据实时数据的断面类型和时间范围生成全量时间点,随后根据全量时间点判断数据是否是丢点数据,并且获取被判断为丢点数据的数据的丢点时间。
2.根据权利要求1所述的方法,其特征在于,在第一步骤中,在执行定时查缺处理的过程中,对数据中心接入的调度自动化系统的实时数据表进行定时扫描,以查找丢点数据的丢点文件名。
3.根据权利要求1或2所述的方法,其特征在于,第二步骤中使用ETL工具执行数据汇总处理。
4.根据权利要求1所述的方法,其特征在于,在第一步骤中,还进一步将丢点时间转化为丢点文件名。
5.根据权利要求1或2所述的方法,其特征在于,总丢点文件中标明了各丢点数据的来源。
6.根据权利要求5所述的方法,其特征在于,所述各丢点数据的来源由丢点数据的数据中心的名称表示。
7.根据权利要求1或2所述的方法,其特征在于,在第三步骤中,就总丢点文件集中处理以得到统计报表和详细报表,并且将统计报表和详细报表展示出来。
8.根据权利要求1或2所述的方法,其特征在于,所述多套数据中心为四套数据中心。
9.根据权利要求1或2所述的方法,其特征在于,所述实时数据为SCADA实时数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华东电网有限公司;上海欣同创科技有限公司,未经华东电网有限公司;上海欣同创科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201510270085.X/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种微博团体的发现方法及装置
- 下一篇:近重复记录的相似度评估方法
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置