[发明专利]基于P2P和隐私计算的数据节点结构及数据管理方法

说明书

本发明公开了一种基于P2P和隐私计算的数据节点结构及数据管理方法，其中，提出使用P2P的方式来管理数据提供方数据节点的加入，使用P2P的方式来进行元数据的发布和撤销，并使用隐私计算的技术管理数据提供方的源数据，严控数据流向，保证在数据不出私域的前提下实现数据流通和价值化。本发明将数据分片阶段和计算阶段分离，有利于将数据加密或数据分片阶段提前进行预处理，提升计算阶段的实时性，更贴合实际商用场景的实时性要求。本发明可以保护源数据不出私域、强数据安全、去中心化、资源消耗低、实时性强、易于扩展，侧重考虑了商业化的实际使用场景。

技术领域

本发明涉及计算机软件领域，尤其涉及的是一种基于P2P和隐私计算的数据节点结构和一种基于P2P和隐私计算的数据管理方法。

背景技术

现实应用中，如何保证在数据不出私域的前提下实现数据流通和价值化。

现阶段隐私计算系统对数据提供方的管理和源数据的元数据的管理一般都是以集中化的注册管理中心的方式，新增的数据提供方直接将ip和port注册到注册中心，并将数据元数据上传到一个集中化的地方用于后续的发布。然而，对于一个分布式隐私计算系统来说，这种中心化的操作是不合理的；容易因中心化服务故障而导致整个系统不可用。

因此，现有技术存在缺陷，需要改进。

发明内容

本发明所要解决的技术问题是：提供一种保护源数据不出私域、强数据安全、去中心化、资源消耗低、实时性强、易于扩展，侧重考虑了商业化的实际使用场景的基于P2P和隐私计算的数据节点结构及数据管理方法。

本发明的技术方案如下：一种基于P2P和隐私计算的数据节点结构，包括：libp2p模块，用于P2P网络中数据节点的发现；鉴权模块ValidatorManager，提供数据授权和数据准入，用于数据节点和其他节点间的身份验证和权限验证以及任务资源审核；对外接口模块ApiServer，用于与外部进行数据通信；存储层接口抽象Store Interface，用于对接各类数据源；数据格式转换引擎DataConvertEngine，对读取写入的数据的数据格式自由互转。

应用于上述技术方案，所述的基于P2P和隐私计算的数据节点结构中，所述对外接口模块ApiServer提供对外的rpc和api接口。

应用于上述各个技术方案，所述的基于P2P和隐私计算的数据节点结构中，所述存储层接口抽象Store Interface采用可插拔式对接各类数据源。

并且，本发明还通过了一种采用以上所述数据节点结构的基于P2P和隐私计算的数据管理方法，包括：数据节点的加入，其具体包括：步骤A1：在隐私网络中搭建种子节点，使种子节点之间直连；步骤A2：新的数据节点与一种子节点连接，并且，通过其libp2p模块发现与各种子节点连接的其他数据节点，并将对方的路由信息更新到自己的DHT中；元数据的发布，其具体包括：步骤B1：添加源数据的元信息，并上传源数据及其元信息到一数据节点；步骤B2：该数据节点将元数据进行全网P2P广播；全网其他数据节点在接收到该元数据后，记录元数据，并将元数据追加到各自本地，然后回复该数据节点其元数据的接收状态信息。

应用于上述各个技术方案，所述的基于P2P和隐私计算的数据管理方法中，还包括元数据的撤销，其具体包括：步骤C1：向一数据节点发起元数据撤销请求，步骤C2：该数据节点接受请求后，向全网其他数据节点P2P广播元数据撤销请求；步骤C3：其他数据节点接受元数据撤销请求，撤销元数据并对其元数据信息变更，并将变更信息刷新到各自本地后，回复该数据节点其元数据的撤销状态信息。