[发明专利]一种海量数据点实时数据的分布式管理方法及系统有效
申请号: | 201811247809.9 | 申请日: | 2018-10-25 |
公开(公告)号: | CN109446260B | 公开(公告)日: | 2021-11-19 |
发明(设计)人: | 叶传虎;王傲能;王胜勇;卢家斌 | 申请(专利权)人: | 中冶南方(武汉)自动化有限公司 |
主分类号: | G06F16/25 | 分类号: | G06F16/25;G06F16/27 |
代理公司: | 武汉科皓知识产权代理事务所(特殊普通合伙) 42222 | 代理人: | 魏波 |
地址: | 430205 湖北省武*** | 国省代码: | 湖北;42 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 海量 据点 实时 数据 分布式 管理 方法 系统 | ||
1.一种海量数据点实时数据的分布式管理方法,采用海量数据点实时数据的分布式管理系统;
其特征在于:所述系统包括至少一个数据平台服务器、配置数据服务器、配置管理工具以及客户端;
所述数据平台服务器,用于构建至少一个数据节点,每个数据节点中包含一组分布集群中的设备节点以及设备节点所有的数据点;所述数据平台服务器还用于分片式管理数据点,其中每个分片管理数据节点内的若干数据点,能根据实际情况进行分片的新增和合并;用于为各数据节点分配主机地址和访问端口,其中,每个所述主机地址对应至少一个数据节点,所述访问端口与所述数据节点一一对应;还用于与设备节点之间的数据交互,其中,数据节点能自动加载所管理的设备节点驱动与设备节点进行数据交互;
所述配置数据服务器,用于构建一个配置数据库节点,所述的配置数据库节点中有若干个关系表,所述关系表用于存储设备节点信息、数据点信息、数据节点信息以及设备节点、数据点、数据节点之间的映射关系和查询数据点集合信息;
所述配置管理工具,用于标记各个数据节点和设备节点,其中各个数据节点之间和各个设备节点之间通过字符串ID进行唯一识别;用于标记各个数据点,其中,各数据点之间通过设备节点ID和数据点地址的组合进行唯一识别;还用于向所述配置数据库节点写入关系表信息,这些信息包括设备节点信息、数据点信息、数据节点信息以及设备节点、数据点、数据节点之间的映射关系信息;还用于向所述配置数据节点写入查询数据点集合信息;
所述客户端,用于向所述配置数据库节点发送查询数据点的请求信息,所述请求信息中包括查询数据点集ID;还用于根据配置数据库节点查询到的数据点信息以及数据节点的主机地址和访问端口,连接对应数据节点,完成相应数据点的信息传输;
所述方法包括以下步骤:
步骤1:构建至少一个配置数据库节点,每个配置数据库节点中建立有若干关系表;所述关系表用于存储设备节点信息、数据点信息、数据节点信息以及设备节点、数据点、数据节点之间的映射关系,用于存储查询数据点集合ID和数据点的映射关系;
步骤2:标记所有数据点所属的设备节点,各设备节点之间通过一个字符串设备节点ID进行唯一识别;
步骤3:标记各个数据点,各数据点之间通过设备节点ID和数据点地址的组合进行唯一识别;
步骤4:建立至少一个数据节点,每个数据节点中包含一组分布集群中的设备节点以及设备节点的所有数据点;为各数据节点分配主机地址和访问端口,其中,每个主机地址对应至少一个数据节点,访问端口与所述数据节点一一对应;
步骤5:标记各个数据节点,各数据节点之间通过一个字符串数据节点ID进行唯一识别;
步骤6:标记数据节点、设备节点、数据点之间的映射关系以及查询数据点集合;
步骤7:所述数据节点向所述配置数据库节点发送查询所管理的设备节点及设备节点所有数据点的请求信息;
步骤8:所述配置数据库节点根据所述请求信息,检索关系表后,反馈相应设备节点及数据点信息;
步骤9:根据所述配置数据库节点查询到的设备节点信息和数据点信息,数据节点建立实时数据管理池对查询到的数据点进行实时数据管理,并通过查询到的设备节点信息,连接对应设备节点,根据动态加载的设备驱动,获取设备节点的实时数据,更新数据管理池中数据点的实时数据;并下发写数据指令到设备节点;数据节点根据配置的对外实时数据服务机制,动态加载这些机制对外提供实时数据服务;
其中,实时数据管理池对所属的数据节点的所有数据点根据分片数据点上下限进行自动分片管理,包括新分片的创建、小分片的合并,通过分片式管理数据点的实时数据更新和访问;
步骤10:向所述配置数据库节点发送查询数据点的请求信息;
步骤11:所述配置数据库节点根据所述请求信息,检索关系表后,反馈相应数据点以及数据点所在的数据节点的主机地址和访问端口;
步骤12:根据所述配置数据库节点查询到的数据节点的主机地址和访问端口,主动连接对应数据节点,完成相应数据点的数据订阅、获取主动上报的实时数据和下发写数据指令。
2.根据权利要求1所述的海量数据点实时数据的分布式管理方法,其特征在于:步骤2中,在一个所述设备节点内,使用一个32位的数值标记数据点地址,该数值即为数据点地址。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中冶南方(武汉)自动化有限公司,未经中冶南方(武汉)自动化有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811247809.9/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置