[发明专利]一种面向大数据平台的分布式管理方法及系统

说明书

本发明公开了一种面向大数据平台的分布式管理方法及系统，应用于数据处理技术领域，该方法包括：通过获取分布式存储模块中的存储数据信息，并提取存储数据信息中的共享数据信息.获取预设数据搜索类型中的第一搜索类型，并将第一搜索类型在共享数据信息中进行遍历，得到第一搜索目标。基于第一搜索目标对共享数据信息进行组合封装，得到共享封装数据组，并将共享封装数据组存储至数字中台模块。接收用户端发来的目标搜索数据类型，将目标搜索数据类型在数字中台模块中的共享封装数据组中进行遍历，得到目标遍历结果。将目标遍历结果发送至用户端。解决了现有技术中存在用户在大数据平台进行数据查询的效率较低，查询时间长的技术问题。

技术领域

本发明涉及数据处理领域，尤其涉及一种面向大数据平台的分布式管理方法及系统。

背景技术

大数据平台是一种内容共享、资源共用、数据共通的网络平台，在大数据平台中需要存储大量的数据。然而，在现有技术中大数据平台的数据存储结构混乱，在对大数据平台进行数据检索时需要遍历大量的无用信息，从而导致用户数据查询效率低，查询时间长的问题。

因此，在现有技术中存在用户在大数据平台进行数据查询的效率较低，查询时间长的技术问题。

发明内容

本申请通过提供一种面向大数据平台的分布式管理方法及系统，解决了在现有技术中存在用户在大数据平台进行数据查询的效率较低，查询时间长的技术问题。

本申请提供一种面向大数据平台的分布式管理方法，应用于平台端，所述分布式管理方法应用于分布式管理系统，所述分布式管理系统包括分布式存储模块、数字中台模块，所述分布式管理方法包括：获取分布式存储模块中的存储数据信息，并提取所述存储数据信息中的共享数据信息；获取预设数据搜索类型中的第一搜索类型，并将所述第一搜索类型在所述共享数据信息中进行遍历，得到第一搜索目标；基于所述第一搜索目标对所述共享数据信息进行组合封装，得到共享封装数据组，并将所述共享封装数据组存储至数字中台模块；以及接收用户端发来的目标搜索数据类型；将所述目标搜索数据类型在所述数字中台模块中的所述共享封装数据组中进行遍历，得到目标遍历结果；将所述目标遍历结果发送至所述用户端。

本申请还提供了一种面向大数据平台的分布式管理系统，所述系统包括：共享数据信息获取模块，用于获取分布式存储模块中的存储数据信息，并提取所述存储数据信息中的共享数据信息；第一搜索目标获取模块，用于获取预设数据搜索类型中的第一搜索类型，并将所述第一搜索类型在所述共享数据信息中进行遍历，得到第一搜索目标；共享封装模块，用于基于所述第一搜索目标对所述共享数据信息进行组合封装，得到共享封装数据组，并将所述共享封装数据组存储至数字中台模块；以及搜索数据类型获取模块，用于接收用户端发来的目标搜索数据类型；数据遍历模块，用于将所述目标搜索数据类型在所述数字中台模块中的所述共享封装数据组中进行遍历，得到目标遍历结果；数据发送模块，用于将所述目标遍历结果发送至所述用户端。

本申请还提供了一种电子设备，包括：

存储器，用于存储可执行指令；

处理器，用于执行所述存储器中存储的可执行指令时，实现本申请实施例提供的一种面向大数据平台的分布式管理方法。

本申请实施例提供一种计算机可读存储介质，存储有计算机程序，该程序被处理器执行时,实现本申请实施例提供的一种面向大数据平台的分布式管理方法。