[发明专利]数据处理方法、装置、存储介质以及电子设备

说明书

本发明公开了一种数据处理方法、装置、存储介质以及电子设备。该方法包括：读取多个数据库中，每一个数据库的数据；将读取的数据写入到分布式文件系统中；在接收到向多个数据库中任意一个数据库中写入数据的写入请求的情况下，将写入请求所请求写入的数据写入到分布式文件系统中；注册用于处理分布式文件系统中的数据的目标服务；在接收到对分布式文件系统中的数据的处理请求的情况下，调用目标服务处理分布式文件系统中的数据。本发明解决了各单位间的数据存在数据壁垒，无法互通访问的技术问题。

技术领域

本发明涉及计算机领域，具体而言，涉及一种数据处理方法、装置、存储介质以及电子设备。

背景技术

现有技术中，涉及到不同组织或者单位的数据，由于各个组织或者单位数据存储的数据库并不互通，如果要跨单位进行数据的读写，则需要将A单位的用于访问A单位数据库的账号分配给B单位的员工，从而B单位的员工才能够使用A单位的数据。

也就是说，现有技术中的方法，存在不同单位间存在数据壁垒，无法互通访问的问题。

发明内容

本发明实施例提供了一种数据处理方法、装置、存储介质以及电子设备，以至少解决各单位间的数据存在数据壁垒，无法互通访问的技术问题。

根据本发明实施例的一个方面，提供了一种数据处理方法，包括：读取多个数据库中，每一个数据库的数据；将读取的数据写入到分布式文件系统中；在接收到向上述多个数据库中任意一个数据库中写入数据的写入请求的情况下，将上述写入请求所请求写入的数据写入到上述分布式文件系统中；注册用于处理上述分布式文件系统中的数据的目标服务；在接收到对上述分布式文件系统中的数据的处理请求的情况下，调用上述目标服务处理上述分布式文件系统中的数据。

根据本发明实施例的另一方面，提供了一种数据处理装置，包括：读取模块，用于读取多个数据库中，每一个数据库的数据；第一写入模块，用于将读取的数据写入到分布式文件系统中；第二写入模块，用于在接收到向上述多个数据库中任意一个数据库中写入数据的写入请求的情况下，将上述写入请求所请求写入的数据写入到上述分布式文件系统中；注册模块，用于注册用于处理上述分布式文件系统中的数据的目标服务；调用模块，用于在接收到对上述分布式文件系统中的数据的处理请求的情况下，调用上述目标服务处理上述分布式文件系统中的数据。

作为一种可选的示例，上述第二写入模块包括：解析单元，用于在接收到向上述多个数据库中任意一个数据库中写入数据的写入请求的情况下，通过解析器解析上述写入请求所请求写入的数据；传输单元，用于将解析得到的数据通过消息总线传输到流计算任务；计算单元，用于由上述流计算任务对解析得到的数据进行计算，写入到上述分布式文件系统中。

作为一种可选的示例，上述装置还包括：监控模块，用于在注册用于处理上述分布式文件系统中的数据的目标服务之后，监控包括上述目标服务在内的每一个服务的服务状态与生命周期；注销模块，用于在任意一个上述服务的上述生命周期结束的情况下，注销上述生命周期结束的上述服务；发送模块，用于在任意一个上述服务的上述服务状态异常的情况下，发送告警信息。

作为一种可选的示例，上述装置还包括：创建模块，用于在接收到申请使用沙箱的申请请求的情况下，在当前不存在可用沙箱的情况下，创建目标沙箱，其中，上述目标沙箱禁止对上述目标沙箱中的数据进行下载；推送模块，用于在产生上述申请请求的第一账号具备访问上述目标沙箱的账号权限的情况下，周期性的将上述第一账号所要访问的数据推送到上述目标沙箱中；控制模块，用于在上述第一账号登入上述目标沙箱的情况下，由上述第一账号访问上述目标沙箱中的数据。

作为一种可选的示例，上述装置还包括：第一检测模块，用于周期性的检测上述目标沙箱的状态；删除模块，用于在上述目标沙箱过期的情况下，删除上述目标沙箱中的数据；第一处理模块，用于禁止上述第一账号访问上述目标沙箱。