[发明专利]基于区块链的冷热时序数据分类处理方法及存储系统有效
申请号: | 202010392196.9 | 申请日: | 2020-05-11 |
公开(公告)号: | CN111723126B | 公开(公告)日: | 2022-09-02 |
发明(设计)人: | 吴以凡;郑鹏达;张桦;戴国骏 | 申请(专利权)人: | 杭州电子科技大学 |
主分类号: | G06F16/2458 | 分类号: | G06F16/2458;G06F16/28;H04L67/1097;H04L67/1074;H04L9/32 |
代理公司: | 杭州君度专利代理事务所(特殊普通合伙) 33240 | 代理人: | 朱月芬 |
地址: | 310018 浙*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 区块 冷热 时序 数据 分类 处理 方法 存储系统 | ||
1.一种基于区块链的冷热时序数据分类存储系统,其特征在于,包括多链数据传输模块、内容哈希存储模块:
所述的多链数据传输模块基于多链,根据设定的数据保留时间和数据传输通道的数目构造多条自动生成和自动销毁即具有生命周期的数据链即数据传输通道,输入的时序数据直接以内容形式存储在数据传输通道的区块文件中;
所述的内容哈希存储模块,构造单条一直存在的数据传输通道即存证链,输入的时序数据内容都会以内容哈希形式存储在内容哈希存储模块的区块文件中;内容哈希存储模块包含多个过期数据区块,其过期数据区块中的信息是对多链数据传输模块中过期数据链的数据进行内容哈希所得到的结果,每个过期数据区块对应一个过期数据传输通道;
进一步的,每条数据链即数据传输通道会与多个区块链节点关联,经过权限认证的区块链节点可以在所授权的数据传输通道进行时序数据的存取,在数据传输通道关联的各个区块链节点在其本地都会维护一份该数据传输通道内时序数据的账本;
所述的数据传输通道内时序数据的账本,包含该数据传输通道的时间分区、该数据传输通道内的时序数据和时序数据的数据所属节点;
一种基于区块链的冷热时序数据分类存储系统的使用方法,包括以下步骤:
步骤(1)设定时序数据保留策略;
对数据保留时间和数据传输通道的数目进行设定,通过配置文件进行配置;
数据保留时间,为单个数据传输通道的数据保留时间;
数据传输通道,根据数据传输通道的数目生成数据传输通道;数据传输通道与数据保留时间结合,得到每个数据传输通道的所属时间分区;
步骤(2)根据上传的时序数据的时间参数,区别热点数据与冷门数据;
根据预先设定的阈值对时序数据进行区别,当时序数据的时间参数小于设定的阈值则判定时序数据为热点数据,当时序数据的时间参数大于等于设定的阈值则判定时序数据为冷门数据;
所述的时序数据包含时间参数和数据所属节点;
步骤(3)当时序数据为热点数据时,将时序数据输入时序数据存储系统的多链数据传输模块中;在输入至最新的数据传输通道前,根据最新的数据传输通道的时间分区和时序数据的时间参数和数据所属节点对时序数据添加标签;
当时序数据为冷门数据时,将时序数据通过内容哈希存储在时序数据存储系统的内容哈希存储模块中;
步骤(4)当多链数据传输模块中的数据传输通道超过数据保留时间确定的生命周期后将会进行数据传输通道的销毁,并生成新的处理不同时间区间的数据传输通道;数据传输通道的数目是固定;
内容哈希存储模块在数据传输通道销毁时进行数据添加,数据传输通道发送过期信号给关联的各区块链节点;各区块链节点对属于其自身的时序数据进行内容哈希;时序数据存储系统基于共识算法对与该数据传输通道关联的各区块链节点的内容哈希对比达成共识;达成共识后,将时间分区、数据所属节点、内容哈希存到存证链上;
进一步的,所述内容哈希存储模块的中时序数据的获取步骤如下:
根据查询的时间区间,在存证链上获取对应的节点信息和内容哈希;根据节点信息获取时间区间内的数据,在获取所有节点的数据后,对获得的时序数据、数据所属节点以及时间区间进行内容哈希,检查得到内容哈希是否和链上的内容哈希进行比对;如果哈希比对一致,则获取数据完整并正确;否则数据可能不完整或者数据中途得到篡改。
2.根据权利要求1所述的一种基于区块链的冷热时序数据分类存储系统,其特征在于,进一步的,多链数据传输模块中的数据传输通道内的时序数据账本在与该数据传输通道关联的每个区块链节点都备份了全部数据,而在数据传输通道过期后,关联的每个区块链节点仅保留属于其自身的数据,减少了数据的备份,但同时不能避免之后相关区块链节点失联后所造成的数据丢失。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州电子科技大学,未经杭州电子科技大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010392196.9/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种电光花纸及其制备方法与应用
- 下一篇:一种空心圆台的蜡模压制装置