[发明专利]多源监控数据分类建模及流转方法和系统有效
申请号: | 202110173526.X | 申请日: | 2021-02-09 |
公开(公告)号: | CN112948404B | 公开(公告)日: | 2022-11-15 |
发明(设计)人: | 李冰;胡波;费洋;石琦;崔军飞 | 申请(专利权)人: | 国电南瑞科技股份有限公司 |
主分类号: | G06F16/23 | 分类号: | G06F16/23;G06F16/2455;G06F16/27;G06F16/28 |
代理公司: | 南京纵横知识产权代理有限公司 32224 | 代理人: | 朱远枫 |
地址: | 211106 江苏省南京*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 监控 数据 分类 建模 流转 方法 系统 | ||
1.多源监控数据分类建模及流转方法,其特征在于,包括以下步骤:
根据预先建立的模式库确定关键数据,将子系统原始报文中的数据与判定为关键数据的关键字匹配,将成功匹配的数据存入关键数据缓存;将关键数据缓存中的数据全部存入数据库;
模式库的建立方法包括:对系统的数据按照关键字进行分类,根据分类结果建立数据模式库和规则库,根据规则库更新数据模式库完成数据建模,具体方法包括以下步骤:按照关键字对已有系统数据进行分类,对各关键字对应的各项数据分别确定特征值形成初始模式库;
系统加入新数据时,通过关键字匹配的方式检索所述模式库,自动适配特征值;根据关键字及其对应的特征值识别出该关键字特征值的规律和计算出特征值的加权值并将规律和加权值加入到规则库更新规则库;若在模式库中没有匹配到新数据,则根据规则库确定该新数据的特征值,将其加入到模式库更新模式库;
对各关键字对应的各项数据分别确定特征值形成初始模式库的方法包括:
用预先辨识出的特征元素对系统中的数据进行表征,每个数据点表示为
Pt(a,b,c,d),其中a代表第一特征值, b代表第二特征值,c代表第三特征值,d代表第四特征值;
计算特征值的加权值的方法包括:确定关键字增量,加权值等于特征值增量除以数据关键字增量;
所述特征元素包括时效性、准确性、重要性和完整性;
根据规则库确定该新数据的特征值的方法为:从规则库中读取特征值的加权值和规律,根据加权值的计算方法和规律反推该数据的特征值。
2.根据权利要求1所述多源监控数据分类建模及流转方法,其特征在于,
所述方法还包括根据预先建立的模式库确定非关键数据,将子系统原始报文中的数据与非关键数据的关键字匹配,将成功匹配的子系统原始报文中的数据存入至非关键数据缓存。
3.多源监控数据分类建模及流转系统,其特征在于,所述系统应用如权利要求1~2任一所述的多源监控数据分类建模及流转方法,所述系统包括:采集模块、数据分类模块、数据建模模块、数据筛选模块、数据处理模块和数据入库模块;
所述采集模块用于通过协议与子系统进行通信获取子系统的数据;
所述数据分类模块,用于对系统的数据按照关键字进行分类;
所述数据建模模块,用于根据分类结果建立数据模式库和规则库,根据规则库更新数据模式库完成数据建模;
所述数据筛选模块,用于根据数据建模模块建立的模式库确定关键数据;
所述数据处理模块,用于将子系统原始报文中的数据与关键数据的关键字匹配,将成功匹配的子系统的原始报文中的数据存入关键数据缓存;
所述数据入库模块,用于根据数据处理模块的处理结果将关键数据缓存中的数据全部存入数据库。
4.根据权利要求3所述的多源监控数据分类建模及流转系统,其特征在于,所述数据处理模块,具体用于通过消息与采集模块进行异步通信,并根据预定义规则,优先发送关键数据缓存中的信息,采集模块必须在收到处理模块确认后的回复报文后,才发送下一条信息,否则一直发送此信息,直到此信息被处理模块正确接收,当关键数据缓存中的所有信息全部发完后,才发送非关键数据缓存中的信息,采集模块发送非关键数据不需要等待处理模块反馈确认,就直接发送下一包消息。
5.根据权利要求3所述多源监控数据分类建模及流转系统,其特征在于,
所述数据入库模块具体用于执行以下步骤:当所述数据处理模块完成对数据的处理,所述数据入库模块通过调用数据库的同步接口,优先把关键数据从数据处理模块的内存中存入数据库中;当数据库接口返回不成功时,数据处理模块需要重新调用数据库接口,直至关键数据成功写入数据库;当数据处理模块中的关键数据全部入库后,才操作非关键数据,不管是否入库成功,处理模块继续进行数据入库操作。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于国电南瑞科技股份有限公司,未经国电南瑞科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110173526.X/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置