[发明专利]一种基于智能合约的数据湖融合数据安全分析方法

说明书

本发明提供一种基于智能合约的数据湖融合数据安全分析方法，属于涉及区块链、智能合约、数据湖和隐私保护技术领域，本发明将数据湖划分安全区域，对于原始数据充分保护的同时，通过数据清洗、数据脱敏、隐私评估等手段，形成二次加工数据，用于数据分析。通过数据编目、标准化标识及语义，更高效的实现数据融合；数据融合分析洞察将利用数据湖提供的服务框架来完成，整个数据分析使用过程以智能合约的形式，利用区块链基础设施记录到区块链中，实现参与各方的互信，保障了行为的完整性和不可篡改性，避免原始数据泄密引起的纠纷。

技术领域

本发明涉及区块链、智能合约、数据湖和隐私保护技术领域，尤其涉及一种基于智能合约的数据湖融合数据安全分析方法。

背景技术

区块链技术，又称为分布式账本技术，是一种去中心信任化、集体维护分布式账本的技术方案，其利用块链式数据结构来验证与存储数据，其本质是由多个节点集体参与通过多方存储、多方计算的方式来实现数据不可篡改、计算结果可信的分布式数据库系统。区块链并不是一种单一的技术，而是多种技术融合的结果，利用区块链技术维护一个可靠的、难以篡改的账本记录，可以降低信任的风险，并能有效的降低众参与方协作的维护成本。区块链技术的发展使得智能合约成为可能，智能合约是一段由一台计算机或者计算机网络按照签署合约的权利和义务自动执行的代码，合约的执行无需中心节点来进行控制，通过自动化脚本代码实现编程和操作数据。由于智能合约使用代码的方式，保证了合同条款的强制执行力；将智能合约与区块链相结合，使得合约的条款一旦设定，就没有第三方可以篡改。智能合约这一颠覆性的技术是区块链的重要特性，将会对人类社会结构产生重大变化。

近年来，移动互联网和物联网技术发展迅速，万物互联的时代已经到来，数据的规模和类型都呈现爆炸性的增长，政府数据、社会数据、互联网数据、物联网数据等多源异构超媒体数据为数据分析洞察带来机会。数据湖本质上是一种在系统或存储仓库中以原始格式存储数据的方法，能够以批量、流或实时等多种方式汇集和存储各种类型的数据，通过数据湖上各类服务，实现对数据中蕴含价值的洞察。数据湖中大规模、多源异构、跨领域、跨媒体的数据融合已经成为趋势，伴随着数据融合，也产生了数据隐私安全问题。在这种情况下，如何有效利用区块链技术进行数据湖内安全保密的数据融合分析，解决其中涉及的隐私保护问题，并高效的实现数据融合成为亟需解决的问题。

发明内容

为了解决以上技术问题，本发明提出了一种基于智能合约的数据湖融合数据安全分析方法，将数据湖划分安全区域，对于原始数据充分保护的同时，通过数据清洗、数据脱敏、隐私评估等手段，形成二次加工数据，用于数据分析。通过数据编目、标准化标识及语义，更高效的实现数据融合；数据融合分析洞察将利用数据湖提供的服务框架来完成，整个数据分析使用过程以智能合约的形式，利用区块链基础设施记录到区块链中。实现参与各方的互信，保障了行为的完整性和不可篡改性，避免原始数据泄密引起的纠纷。

本发明的技术方案是：

一种基于智能合约的数据湖融合数据安全分析方法，

利用数据湖提供的服务，形成数据自动清洗、数据脱敏、隐私评估等模型，用于原始数据的二次加工；

数据湖支持多租户，设置专门的安全区域，用于融合数据处理；

随机抽取数据样本用于数据使用者训练算法，对算法评估后，在数据湖中安全区域中运行，并将输出的中间结果及最终结果进行评估，判断数据隐私泄露可能性；

数据湖基础设施之上提供区块链服务，在一个P2P共识网络中建立区块链基础设施，P2P共识网络存在管理节点、背书节点和记账节点，共同合作实现智能合约的执行以及区块链新区块的生成；

参与数据标注任务的各个参与节点共同维护一份账本，账本中记录数据融合分析任务智能合约的执行结果。

另外，通过第三方数字证书认证中心为参与方和租户提供身份证书及通信安全认证服务。

其中，