[发明专利]一种数据实时存储方法和嵌入式实时数据存储中间件在审
申请号: | 202210367988.X | 申请日: | 2022-04-08 |
公开(公告)号: | CN114661242A | 公开(公告)日: | 2022-06-24 |
发明(设计)人: | 韩大为;吴江栋;杨斌;李卫华;范利刚;周巍;袁行;曾洋洋 | 申请(专利权)人: | 北京中电普华信息技术有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06;G06F9/54;G06F16/174;G06F16/9035 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 吴磊 |
地址: | 100192 北京市海*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 实时 存储 方法 嵌入式 中间件 | ||
1.一种数据实时存储方法,其特征在于,应用于边缘物联代理装置,所述方法包括:
获取接口调用的第一请求数据,并对所述第一请求数据进行协议解析,获取解析后的请求指令、待存储数据和回调函数;
根据所述请求指令获取第一标签信息,所述第一标签信息包括所述第一标签信息对应的定长快存桶信息、数据合法值特征;
获取所述定长快存桶信息对应的整桶数据;
根据所述整桶数据和所述数据合法值特征对所述待存储数据进行数据过滤,得到过滤后的待存储数据;
将所述过滤后的待存储数据进行存储,并生成存储结果;
根据所述回调函数返回所述存储结果。
2.根据权利要求1所述方法,其特征在于,在所述获取接口调用的第一请求数据之前,所述方法还包括:
获取用于编辑中间件配置信息的第二请求数据,并对所述第二请求数据进行协议解析,获取解析后的第二请求指令;
根据所述第二请求指令对所述中间件配置信息进行编辑;所述中间件配置信息包括:回调函数、标签数、存储块大小、存储段大小、状态反馈频率、日志记录规则;
返回用于编辑中间件配置信息的执行结果。
3.根据权利要求1所述方法,其特征在于,所述将过滤后的待存储数据进行存储,具体包括:
获取快存管理单元中的参数信息,所述参数信息包括定长快存桶集存储数据量大小信息、定长快存桶单桶当前数据量信息;
根据所述快存管理单元中的参数信息将过滤后的待存储数据存储到所述快存管理单元的定长快存桶单桶中;
判断所述快存管理单元中定长快存桶单桶当前数据量是否达到定长快存桶单桶存储数据量;
若快存管理单元中第一标签信息对应的定长快存桶单桶当前数据量达到定长快存桶单桶存储数据量,将所述定长快存桶单桶的数据转存至量存管理单元。
4.根据权利要求3所述方法,其特征在于,快存管理单元包括定长快存桶集模块和变长快存池模块,所述根据所述快存管理单元中的参数信息将过滤后的待存储数据存储到所述快存管理单元的定长快存桶单桶中,包括:
判断所述过滤后的待存储数据的数据类型,所述数据类型包括定长数据和变长数据;
若所述过滤后的待存储数据为定长数据,则将所述过滤后的待存储数据的数据值存储于定长快存桶集模块;
若所述过滤后的待存储数据为变长数据,则将所述过滤后的待存储数据的数据值存储于变长快存池模块,其中所述变长数据的数据值在所述变长快存池模块中的地址以定长数据值的方式与数据属性进行组合,存储于定长快存桶集模块。
5.根据权利要求3所述方法,其特征在于,所述将所述定长快存桶单桶的数据转存至量存管理单元,包括:
基于B+树存储的Key-Value对,根据标签名、状态、类型、数据采集频率建立标签与数据值的索引关系,对转存的定长快存桶单桶中的数据进行压缩,将压缩后的后存储到量存管理单元;其中,所述标签名与物联终端的数据采集点相对应。
6.根据权利要求1所述方法,其特征在于,所述方法还包括:
获取数据读取请求;所述数据读取请求包括第二标签信息,所述第二标签信息中包含待查询数据的存储时间区间、在快存管理单元中所述第二标签信息对应的定长快存桶信息、标签数据压缩类型配置信息;
根据所述第二标签信息获取所述快存管理单元中所述第二标签信息对应的整桶数据;
判断所述待查询数据的存储时间区间与所述整桶数据的存储时间区间是否一致;
若一致,从所述快存管理单元中读取所述第二标签信息对应的数据;
若不一致,从量存管理单元中读取所述第二标签信息对应的压缩数据;并调用数据压缩单元根据所述标签数据压缩类型配置信息选择对应的解压类型对所述压缩数据进行解压缩,将解压缩后的数据进行整合输出。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京中电普华信息技术有限公司,未经北京中电普华信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210367988.X/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置