[发明专利]一种基于区块链的大数据处理方法及设备

说明书

本发明在此提供一种基于区块链的大数据处理方法及设备；包括如下步骤：S1、生成用户数据处理的账号、密码和区块链内操作的权限；S2、判断梳理数据的合法性并发送合法的数据；S3、对所述合法的数据进行分类操作；S4、输入流格式的数据，并结合区块链无中心化存储方式对数据进行加密；S5、对加密的新数据进行备份；S6、通过数据预处理和数据挖掘以及机器学习方式对数据分类整理再存储。本发明是基于区块链的大数据处理方式，从而减少了用户终端从原生资源库中获得资源的次数，极大的减轻了web服务器的数据传输负荷。另外，本发明用以数据加密时，具有强度高、速度快、抗攻击等特点；同时，本发明将数据进行加密备份，保证了数据的安全性。

技术领域

本发明涉及大数据处理领域，具体来讲是一种基于区块链的大数据处理方法及设备。

背景技术

目前，随着通过网络进行的事物或业务处理日益增多，操作数据的可靠性要求越来越高，尤其是对数据的并发读写处理，同时还存在对系统提供审计和日志查询的需求。然而，前通常系统中定义的业务处理逻辑，将核心数据的读写操作混合在一起，由各业务处理逻辑根据自身需要来提供审计日志。这种数据处理方式由于针对特定操作的复杂业务逻辑杂糅在一起，减低了系统可维护性和扩展性；同时，此类系统在互联网用户访问量不可预测的情况下，无法做到性能的动态水平扩展；另外，系统也无法提供完备的业务操作日志，缺乏严格的审查机制和有效的回滚机制。

众所周知，区块链是一种按照时间顺序将数据区块以顺序相连的方式组合成的一种链式数据结构，并以密码学方式保证的不可篡改和不可伪造的分布式账本。广义来讲，区块链技术是利用块链式数据结构来验证与存储数据、利用分布式节点共识算法来生成和更新数据、利用密码学的方式保证数据传输和访问的安全、利用由自动化脚本代码组成的智能合约来编程和操作数据的一种全新的分布式基础架构与计算方式。

经过检索发现，专利号CN201610447316.4的发明公开了一种数据处理方法、装置及系统，采用本发明实施例提供的方法，在接收到目的用户终端发送的资源访问请求后，从该资源访问请求中获得目的资源标签，当确定出与目的资源标签相匹配的第一资源标签时，获得与第一资源标签对应的发送用户终端，并建立目的用户终端与发送用户终端的通信通道，第一资源由发送用户终端发送给目的用户终端，当确定出目的资源标签中与资源标签库中的资源标签不匹配的第二资源标签时，从原生资源库中获取第二资源，并发送至目的用户终端。

专利号CN201610338367.3的发明公开了一种数据处理方法以及装置。数据处理方法，包括：针对参与处理的一个或多个分组，建立扩散网络；其中，所述分组为预设长度的元素集合，且每个所述分组至少包含一个元素；所述扩散网络由扩散路径组成，每一条所述扩散路径均连接并指向分组中的元素和/或元素组，元素组为元素的组合；根据所述扩散路径组建扩散式；其中，扩散式由原体和受体组成，且原体包含受体；对所述扩散式进行扩散运算。该方法及装置能够实现快速完全的雪崩效应，可用于数据加密及解密、计算消息摘要、生成随机数等。

然而，对于数据处理来讲，当仅基于流输入和输出进行处理时，存在当针对一个输入有多个输出时如何传送数据以及尽管在过滤器中实体文件已经被实体化但当数据以流格式被返回时效率低的问题；同时无法生成健康报告。

发明内容

因此，为了解决上述不足，本发明在此提供一种基于区块链的大数据处理方法及设备；本发明是一种基于区块链的大数据处理方式，从而减少了用户终端从原生资源库中获得资源的次数，极大的减轻了web服务器的数据传输负荷。与现有技术相比，节省了硬件开销以及企业开发网络系统的经济费用。另外，本发明用以数据加密时，具有强度高、速度快、抗攻击等特点；随着信息通信技术的快速发展和网络大数据时代的到来，与日俱增的大体量数据资源有赖于网络系统进行高效率的传输处理。同时，本发明将核心业务数据的操作进行加密与备份，最大程度提升系统性能和扩展能力，保证了数据的安全性。同时，与现有技术中不断增加服务器的数量构成服务器集群来满足多用户终端高并发数据请求的需要相比，节省了硬件开销，从而节省了网络系统的经济费用。